首先来介绍一下什么是分布式系统，分布式系统（distributed system）是建立在网络之上的软件系统。正是因为软件的特性，所以分布式系统具有高度的内聚性和透明性。因此，网络和分布式系统之间的区别更多的在于高层软件（特别是操作系统），而不是硬件。 而集中式系统主要指IBM、HP等小型机以上档次 ...
分类：
其他好文 时间：
2019-06-19 00:23:15
阅读次数：
254
第 1 章 Spark 概述 1.1 什么是 Spark 1.2 Spark 内置模块 Spark Core：实现了 Spark 的基本功能，包含任务调度、内存管理、错误恢复、与存储 系统交互等模块。Spark Core 中还包含了对弹性分布式数据集(Resilient Distributed Da ...
分类：
其他好文 时间：
2019-06-17 17:45:42
阅读次数：
110
简述 HDFS（Hadoop Distributed File System），作为Google File System（GFS）的实现，是Hadoop项目的核心子项目，是分布式计算中数据存储管理的基础，是基于流数据模式访问和处理超大文件的需求而开发的，可以运行于廉价的商用服务器上。它所具有的高容错 ...
分类：
其他好文 时间：
2019-06-14 12:51:16
阅读次数：
114
原文链接：CAP 定理的含义 作者： 阮一峰 日期： 2018年7月16日 作者： 阮一峰 日期： 2018年7月16日 分布式系统（distributed system）正变得越来越重要，大型网站几乎都是分布式的。 分布式系统的最大难点，就是各个节点的状态如何同步。CAP 定理是这方面的基本定理， ...
分类：
其他好文 时间：
2019-06-08 18:52:08
阅读次数：
105
CQRS The CQRS pattern and event sourcing are not mere simplistic solutions to the problems associated with large-scale, distributed systems. 从1000万用户并... ...
分类：
其他好文 时间：
2019-06-07 10:49:40
阅读次数：
88
大家好， QQ 群 里的 网友 提议 搞一个 分布式爬虫调度项目，所以发起了这个项目 。 DSpiders， D 表示 “分布式”（Distributed） ， Spiders 取 复数 表示 很多 的 小爬虫，爬呀爬 …… 很可爱 …… ...
分类：
其他好文 时间：
2019-06-07 00:49:05
阅读次数：
100
1、简介 Kafka is a distributed,partitioned,replicated commit logservice。它提供了类似于JMS的特性，但是在设计实现上完全不同，此外它并不是JMS规范的实现。kafka对消息保存时根据Topic进行归类，发送消息者成为Producer, ...
分类：
其他好文 时间：
2019-06-06 19:30:48
阅读次数：
134
转自：https://blog.apollographql.com/apollo-federation-f260cf525d21 What if you could access all of your organization’s data by typing a single GraphQL q ...
分类：
其他好文 时间：
2019-06-06 13:44:40
阅读次数：
109
Wentworth Institute of TechnologyCOMP 3450 – Parallel and Distributed ComputingSummer 2019, SchusterLab Assignment 1In this assignment you are to writ ...
分类：
其他好文 时间：
2019-05-26 20:00:53
阅读次数：
165
Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统(Hadoop Distributed File System)，简称HDFS。HDFS有高容错性的特点 ...
分类：
其他好文 时间：
2019-05-26 17:36:54
阅读次数：
140
