临近DEFI“断崖跳水”，HDFS分布式存储构建大数据安全随着互联网信息技术的发展以及人类生活的智能化，全球数据量不断的无限化扩展和增加。传统存储即将面临淘汰，虽然有技术成熟、性能良好、可用性高等优点，但面对海量数据时，其缺点也越来越明显：如扩展性差、成本高等。为了克服上述缺点，满足海量数据的存储需求，市场出现了分布式存储技术。分布式存储的兴起与互联网的发展密不可分，互联网公司由于其大数据、轻资产
分类：
其他好文 时间：
2020-09-17 21:39:49
阅读次数：
35
最近.netcore比较火。大部分公司都开始转向.netcore，作为技术储备也好，还是兴趣爱好，都有必要做一下研究，.netcore应该是未来的技术方向，不管是分布式服务还是跨平台。服务端架构应该经历了这么几个阶段：WebService--->RemotingObject---->WCF--->.NetCore相比于前几种技术架构，.netcore实现了轻量级和跨平台的要求；可
分类：
Web程序 时间：
2020-09-17 21:15:50
阅读次数：
54
##SpringCloud之Eureka注册中心高可用集群概述 对于微服务这种分布式系统，要充分考虑每个微服务组件的高可用性问题，不能用单点故障。 注册中心本身也是一个服务，如果只有一个节点（服务器），则有可能发生故障而导致无法使用注册和查询服务（单点故障），为保证服务注册中心的高可用，通过服务注册 ...
分类：
编程语言 时间：
2020-09-17 20:34:56
阅读次数：
28
最近工作中呢，频频用到消息中心，包括异步转同步的功能，分布式收集日志信息等功能，在面试中也常会问到候选人关于消息中心的知识点，但大多数程序员，尤其是工作两三年的，虽然平时工作中都有用到消息中心，但都总是不能够说明白其中的原理，于是觉得有必要把消息中心作为一个篇章，专门进行总结梳理一番~看的时候，建议大家不妨先看看问题，自己先尝试回答一下，再看答案。看看自己掌握得如何了那准备好了的话，我们就要开始啦啊~
分类：
其他好文 时间：
2020-09-17 20:18:18
阅读次数：
21
比特币诞生之初是为了实现一个点对点的加密货币系统，以太坊则是在这个基础上实现了图灵完备的虚拟机让区块链成为一个计算平台，而NGK天生就是一个计算系统。在NGK之上的智能合约就类似于我们电脑上的各种程序。NGK是商用分布式应用设计的一款区块链操作系统，具有可扩展性强、支持大规模商业应用等特点。NGK采 ...
分类：
其他好文 时间：
2020-09-17 19:33:09
阅读次数：
21
介绍 不论MapReduce还是RDD，shuffle都是非常重要的一环，也是影响整个程序执行效率的主要环节，但是在这两个编程模型里面shuffle却有很大的异同。 shuffle的目的是对数据进行混洗，将各个节点的同一类数据汇集到某一个节点进行计算，为了就是分布式计算的可扩展性。 可能大家多MR的 ...
分类：
其他好文 时间：
2020-09-17 19:31:45
阅读次数：
30
前言 在微服务架构中，一次请求往往涉及到多个模块，多个中间件，多台机器的相互协作才能完成。这一系列调用请求中，有些是串行的，有些是并行的，那么如何确定这个请求背后调用了哪些应用，哪些模块，哪些节点及调用的先后顺序？如何定位每个模块的性能问题？本文将为你揭晓答案。 本文将会从以下几个方面来阐述 分布式 ...
分类：
其他好文 时间：
2020-09-17 19:28:29
阅读次数：
29
什么是MongoDB ？ MongoDB 是一个开源的文档数据库，它基于 C++ 语言编写，性能高，可用性强，能够自动扩展。 MongoDB 是最流行的 NoSQL 数据库之一，原生支持分布式集群架构，特别适合处理大数据，阿里巴巴、腾讯、头条、Twitter、Google、Facebook 等一线互 ...
分类：
数据库 时间：
2020-09-17 19:21:55
阅读次数：
41
为什么要进行站点可靠性工程在技术世界中，风险从未像现在这样高。迁移到云和微服务以最大程度地提高灵活性已被数字破坏者和前所未有的竞争威胁所取代。随着分布式系统变得越来越复杂，“未知未知数”的规模不断增加。最重要的是，客户的期望很高。停机造成的损失是灾难性的，如果客户不能及时满足他们的需求，他们就会大跌眼镜。根据Gartner的数据，平均停机时间为每小时300,000美元。对于某些公司来说，这个数字要
分类：
其他好文 时间：
2020-09-17 18:34:48
阅读次数：
36
Sqoop 在hadoop和关系型数据库之间转换数据 Flume Flume是一个分布式的高可用的数据收集、聚集和移动的工具。通常用于从其他系统搜集数据，如web服务器产生的日志，通过Flume将日志写入到Hadoop的HDFS中 Canal 数据抽取是 ETL 流程的第一步。我们会将数据从 RDB ...
分类：
其他好文 时间：
2020-09-17 18:33:30
阅读次数：
37
