每个程序员的心中都有一位或者几位崇拜的偶像大神，本文在此总结了以下这些轰动全球的大神级程序员，在程序员这个圈子里，也许他们不仅仅是伟大这么简单! 1.JeffDean 谷歌搜索索引技术的幕后大脑。谷歌大规模分布式计算系统的设计师，例如：站点爬行，索引与搜索，在线广告，MapReduce，BigTab ...
分类：
其他好文 时间：
2017-05-24 16:08:58
阅读次数：
238
部署Hadoop高性能集群服务器概述1）Hadoop是什么Hadoop是Lucene创始人DougCutting，根据Google的相关内容山寨出来的分布式文件系统和对海量数据进行分析计算的基础框架系统，其中包含MapReduce程序，hdfs系统等。Hadoop包括两大核心，分布式存储系统和分布式计算系统。2）分布..
分类：
其他好文 时间：
2017-05-16 15:06:05
阅读次数：
316
linuxCluster：Cluster：计算机集合，为解决某个特定问题组合起来形成的单个系统：类型：LB：LoadBalancing，负载均衡：HA：HighAvailiablity，高可用：HP：HighPerformance，高性能：分布式系统：分布式存储分布式计算系统扩展方式：ScaleUP：向上扩展ScaleOut:向外扩展软件：..
分类：
其他好文 时间：
2017-05-16 14:39:11
阅读次数：
212
一、mapreduce入门 1、什么是mapreduce 首先让我们来重温一下 hadoop 的四大组件：HDFS：分布式存储系统MapReduce：分布式计算系统YARN： hadoop 的资源调度系统Common： 以上三大组件的底层支撑组件，主要提供基础工具包和 RPC 框架等 Mapredu ...
分类：
其他好文 时间：
2017-04-14 12:53:42
阅读次数：
254
引言：本文作者BenTreynorSloss，Google运维团队的高级副总裁，SRE名称的发明者，在这里提供了他对SRE的定义。本文选自《SRE：Google运维解密》。大家都知道，计算机软件系统离开人通常是无法自主运行的。那么，究竟应该如何去运维一个日趋复杂的大型分布式计算系统呢？雇佣系..
分类：
其他好文 时间：
2017-02-22 15:15:42
阅读次数：
230
分布式： 分布式基础学习【一】 —— 分布式文件系统 分布式基础学习【二】 —— 分布式计算系统（Map/Reduce） ...
分类：
其他好文 时间：
2017-01-25 18:55:50
阅读次数：
169
分布式系统要做的任务就是把多台机器有机的组合、连接起来，让其协同完成一件任务，可以是计算任务，也可以是存储任务。如果一定要给近些年的分布式系统研究做一个分类的话，大概可以包括三大部分：1.分布式存储系统2.分布式计算系统3.分布式管理系统这是一个范围比较广的话题..
分类：
其他好文 时间：
2016-10-17 00:38:06
阅读次数：
366
许多分布式计算系统都可以实时或接近实时地处理大数据流。本文将对三种Apache框架分别进行简单介绍，然后尝试快速、高度概述其异同。 Apache Storm 在Storm中，先要设计一个用于实时计算的图状结构，我们称之为拓扑（topology）。这个拓扑将会被提交给集群，由集群中的主控节点（mast ...
分类：
其他好文 时间：
2016-10-10 20:24:13
阅读次数：
118
Onyx 0.9.10-beta4 发布了，Onyx 是一个无中心、支持云、容错的分布式计算系统（腾云科技ty300.com），使用 Clojure 编写，支持批处理和流处理混合，提供信息模型用于描述和构建分布式工作流（基础教程qkxue.net）。暂未发现更新描述，可点击发行说明和提交记录以保持关 ...
分类：
其他好文 时间：
2016-09-11 12:53:17
阅读次数：
120
Onyx 0.9.10-beta2 和 beta3 发布了，Onyx 是一个无中心、支持云、容错的分布式计算系统（腾云科技ty300.com），使用 Clojure 编写（基础教程qkxue.net），支持批处理和流处理混合，提供信息模型用于描述和构建分布式工作流。本次更细暂无更新描述，可点击发行说 ...
分类：
其他好文 时间：
2016-09-10 11:44:29
阅读次数：
136
