1.简介 Erlang要编写高容错性、稳定性的系统,supervisor就是用来解决这一问题的核心思想。通过建立一颗监控树,来组织进程之间的关系,通过确定重启策略、子进程说明书等参数信息来确定佣程与督程的行为,以及在发生故障时的处理办法。简单介绍supervisor的API: start_lin.....
分类:
其他好文 时间:
2015-07-05 16:14:57
阅读次数:
179
一、序言近几个月一直从事一个分布式异步通信系统,今天就整理并blog一下.这是一个全国性的通信平台,对性能,海量数据,容错性以及扩展性有非常高的要求,所以在系统的架构上就不能简单的采用集中式.简单的总结一下就是: 1.数据分布式存储 2.请求分布式调度 3.多结点分布式部署 4.双重...
分类:
编程语言 时间:
2015-07-05 14:57:30
阅读次数:
153
什么是MySQL集群 MySQL集群是一个无共享的(shared-nothing)、分布式节点架构的存储方案,其目的是提供容错性和高性能。 数据更新使用读已提交隔离级别(read-committedisolation)来保证所有节点数据的一致性,使用两阶段提交机制(two-phasedcommit)保证所有节点都有相同的数据(如果任何一个写操作失败,则更新失败)。 无共享...
分类:
数据库 时间:
2015-07-04 18:29:49
阅读次数:
279
优点:高效、简单、易用的Html解析器。学习时间,分分钟。解析速度超过,查找速度超快,支持格式化。有强悍的容错性,即使HTML标签不规范,也会尽可以进行匹配,弥补,正确纠错率达95%以上。即使不能正确纠错,也不会导致解析不下去。支持大小写混合匹配,即开始标签与结束标签为和也可以正确的进行匹配。Mav...
分类:
Web程序 时间:
2015-07-01 11:27:51
阅读次数:
138
1. Storm是什么,怎么做,如何做的更好?Storm是一个开源的分布式实时计算系统,它可以简单、可靠地处理大量的数据流。Storm有很多应用场景,如实时分析、在线机器学习、持续计算、分布式RPC、ETL,等等。Storm支持水平扩展,具有高容错性,保证每个消息都会得到处理,而且处理速度很快(在一...
分类:
其他好文 时间:
2015-06-28 21:25:04
阅读次数:
233
总体上,我觉得我们组做这个项目还是可以的,起码一点就是可以运行,实现了基本的功能,当然,如果说很完美就肯定不是了,我们这个项目存在着很多的不足,比如说容错性,界面美观,还有功能等都有需要改正的地方,我们接下来会继续学习一下开发Android的知识。在这次团队合作中,我小组一开始有五个人组成,但是后来...
分类:
其他好文 时间:
2015-06-26 23:45:30
阅读次数:
139
最近发现搭建solr集群相对来说还是要比ES集群繁琐许多,并且ES在索引负载均衡、容错性等方面要比solr集群好很多(至少我是这么认为的)。因此将ES集群的搭建不走在这里简单描述下...
分类:
其他好文 时间:
2015-06-15 16:28:16
阅读次数:
129
1. 来源和特点 源自于Google的MapReduce论文 : 发表于2004年12月 Hadoop MapReduce是Google MapReduce克隆版 特点: 易于编程 良好的扩展性 高容错性 适合PB级以上海量数据的离线处理 不擅长的方面: 实时计算 像MySQL一样,在毫秒级或者秒级...
分类:
其他好文 时间:
2015-06-15 12:56:48
阅读次数:
265
1. MapReduce架构: 各个角色的功能: 2. MapReduce——容错性: JobTracker 单点故障,一旦出现故障,整个集群不可用 TaskTracker 周期性向JobTracker汇报心跳 一旦出现故障,上面所有任务将被调度到其他节点上 MapTask/ReduceTask 运...
分类:
其他好文 时间:
2015-06-12 20:48:18
阅读次数:
173
Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高吞吐量(high throughput)来访问应用程序的数据,适合那些有着超大数据集(large data set)的应用程序。HDFS放宽了(relax)POSIX的要求,可以以流的形式访问(streaming access)文件系统中的数据。Hadoop的框架最核心的设计就是:HDFS和MapRedu...
分类:
Web程序 时间:
2015-06-10 19:32:12
阅读次数:
130