消息队列 消息队列技术是分布式应用间交换信息的一种技术。消息队列可驻留在内存或磁盘上,队列存储消息直到它们被应用程序读走。通过消息队列,应用程序可独立地执行--它们不需要知道彼此的位置、或在继续执行前不需要等待接收程序接收此消息。在分布式计算环境中,为了集成分布式应用,开发者需要对异构网络环境下的分 ...
分类:
其他好文 时间:
2017-06-04 21:14:05
阅读次数:
149
1.什么是云计算 云计算是云计算(Grid Computing )、分布式计算(Distributed Computing)、并行计算(Parallel Computing)、效用计算(Utility Computing)、网络存储(Network Storage Technologies)、虚拟化 ...
分类:
其他好文 时间:
2017-06-03 15:04:00
阅读次数:
292
流式大数据处理的三种框架:Storm,Spark和Samza 2017-06-01 Spark技术日报 本文来自CSDN博客,ID「秋夜无霜」 原文:http://blog.csdn.net/shichen2010/article/details/72758300 许多分布式计算系统都可以实时或接近 ...
分类:
其他好文 时间:
2017-06-03 12:58:28
阅读次数:
171
1 MySQL集群概述和安装环境MySQL Cluster是MySQL适合于分布式计算环境的高实用、高冗余版本。Cluster的汉语是“集群”的意思。它采用了NDB Cluster 存储引擎,允许在1个 Cluster 中运行多个MySQL服务器。MySQL Cluster 是一种技术,该技术允许在 ...
分类:
数据库 时间:
2017-06-02 15:43:27
阅读次数:
277
最近在写本科的毕业论文,题目是有关于MapReduce的并行化处理,老师给出修改意见中提到了关于分布式计算框架的的国内外研究现状,一开始并没有搞懂分布式计算机框架,以为是MapReduce。MapReduce只是一种并行编程模式,也可以是一种并行框架,并不是分布式计算框架。百度得知,比如Hadoop ...
分类:
其他好文 时间:
2017-05-28 12:26:10
阅读次数:
225
转载请注明出处:http://blog.csdn.net/l1028386804/article/details/46833179 1 概述 MySQL Cluster 是MySQL 适合于分布式计算环境的高有用、可拓展、高性能、高冗余版本号。其研发设计的初衷就是要满足很多行业里的最严酷应用要求。这 ...
分类:
数据库 时间:
2017-05-28 10:05:08
阅读次数:
260
每个程序员的心中都有一位或者几位崇拜的偶像大神,本文在此总结了以下这些轰动全球的大神级程序员,在程序员这个圈子里,也许他们不仅仅是伟大这么简单! 1.JeffDean 谷歌搜索索引技术的幕后大脑。谷歌大规模分布式计算系统的设计师,例如:站点爬行,索引与搜索,在线广告,MapReduce,BigTab ...
分类:
其他好文 时间:
2017-05-24 16:08:58
阅读次数:
238
提到列式(ColumnFamily)数据库,就不得不提Google的BigTable,其开源版本就是我们熟知的HBASE。BigTable建立在谷歌的另两个系统GFS和Chubby之上,这三个系统和分布式计算编程模型MapReduce共同构成Google云计算的基础,Chubby解决主从自动切换的基矗接下来通过一个表格对比来引..
分类:
其他好文 时间:
2017-05-23 21:38:55
阅读次数:
277
本文从背景、分布式文件系统、容错机制、分布式节点距离计算法则、数据分布策略、分布式计算调度、跨IDC集群规划的两种方式、ODPS跨集群数据依赖等方面深度介绍了分布式大数据系统中全局数据调度和管理。 大数据技能 分布式大数据系统巧实现,全局数据调度管理不再难 作者:大数据史记 大规模数据的分布式机器学 ...
分类:
其他好文 时间:
2017-05-22 16:39:07
阅读次数:
211
0x01简介Zookeeper是一个很好的集群管理工具,被大量用于分布式计算。如Hadoop以及Storm系统中。ApacheZooKeeper是一个为分布式应用所设计开源协调服务,其设计目是为了减轻分布式应用程序所承担的协调任务。可以为用户提供同步、配置管理、分组和命名服务。0x02环境说明在三台..
分类:
其他好文 时间:
2017-05-22 15:13:14
阅读次数:
202