作者:大数据女神-诺蓝(微信公号:dashujunvshen)。本文是36大数据专稿,转载必须标明来源36大数据。 接上一部分:一共81个,开源大数据处理工具汇总(上),第二部分主要收集整理的内容主要有日志收集系统、消息系统、分布式服务、集群管理、RPC、基础设施、搜索引擎、Iaas和监控管理等大....
分类:
其他好文 时间:
2015-10-13 12:09:51
阅读次数:
305
Web Service是一种网络服务,通过通用的规范,Web Service技术允许使用者访问网络上每一个Web Service所提供的服务。在网络快速发展的时代,这种基于网络的分布式服务已经被广泛地应用。虽然如今轻量级的Restful服务正如日中天,但是了解Web Service也是基础中的基础。
分类:
Web程序 时间:
2015-10-02 23:45:53
阅读次数:
327
大型网站架构的演化历程1、网站初始架构2、应用于数据分离(应用程序,文件系统,数据库系统)3、使用缓存4、应用服务器集群5、数据库读写分离6、CDN和反向代理7、分布式数据库系统和分布式文件系统8、nosql和搜索引擎9、业务拆分10、分布式服务
分类:
Web程序 时间:
2015-10-01 19:15:19
阅读次数:
175
Elastic search在数据分析的应用中相当于一个数据库的搜索引擎。跟MySQL类似,它有自己的查询语言,只不过不是关系型数据库,属于NoSQL。可以根据索引从分布式服务器文件系统中快速存取数据。mysql的数据库和表存放在某台服务器上,使用的时候连接到服务器对数据库进行操作,数据使用unic...
分类:
其他好文 时间:
2015-09-30 19:38:04
阅读次数:
163
http://homeway.me/0x01.大型网站演化简单说,分布式是以缩短单个任务的执行时间来提升效率的,而集群则是通过提高单位时间内执行的任务数来提升效率。集群主要分为:高可用集群(High Availability Cluster),负载均衡集群(Load Balance Cluster,...
分类:
其他好文 时间:
2015-09-27 19:59:53
阅读次数:
202
0x01.大型网站演化简单说,分布式是以缩短单个任务的执行时间来提升效率的,而集群则是通过提高单位时间内执行的任务数来提升效率。集群主要分为:高可用集群(High Availability Cluster),负载均衡集群(Load Balance Cluster,nginx即可实现),科学计算集群(...
分类:
其他好文 时间:
2015-09-23 18:41:32
阅读次数:
142
Zookeeper 从设计模式角度来看,是一个基于观察者模式设计的分布式服务管理框架,它负责存储和管理大家都关心的数据,然后接受观察者的注册,一旦这些数据的状态发生变化,Zookeeper 就将负责通知已经在 Zookeeper 上注册的那些观察者做出相应的反应,从而实现集群中类似 Master/Slave 管理模式,关于 Zookeeper 的详细架构等内部细节可以阅读 Zookeeper 的源...
分类:
其他好文 时间:
2015-09-20 13:20:46
阅读次数:
206
Dubbo入门简介(一)一、什么是DubboDubbo是阿里巴巴开源出来的一个分布式服务框架,致力于提供高性能和透明化的RPC远程服务调用方案,以及SOA服务治理方案。通过扩展spring schema 和 注解标签,可以和spring无缝集成(http://blog.csdn.net/achill...
分类:
其他好文 时间:
2015-09-12 07:24:52
阅读次数:
298
在分布式服务框架中,一个最基础的问题就是远程服务是怎么通讯的,在Java领域中有很多可实现远程通讯的技术,例如:RMI、MINA、ESB、 Burlap、Hessian、SOAP、EJB和JMS 等,这些名词之间到底是些什么关系呢,它们背后到底是基于什么原理实现的呢,了解这些是实现分布式服务框架的基...
分类:
其他好文 时间:
2015-09-12 00:41:22
阅读次数:
299
云计算设计模式(二十)——调度程序代理管理者模式协调一系列在分布式服务集和其他远程资源的的行为,试图透明地处理故障,如果这些操作失败,或撤销,如果系统不能从故障中恢复执行工作的影响。这种模式可以分布式系统中增加弹性和灵活性,使之恢复和重试失败是由于短暂的异常,持久的故障和处理故障等操作。背景和问题应...
分类:
其他好文 时间:
2015-09-01 19:51:17
阅读次数:
230