1 读写分离 在数据库分布式集群中,从节点从逻辑上是不能写数据的,但是也不读的话会造成资源的浪费; 分析: 集群中从节点具有数据同步的效果,可以完成对外的读服务,从节点的整体数量一般来讲大于主节点;读的服务比例大于写的服务;一旦读写分离实现,集群的性能就可以得到极大的提升; 2 高可用替换 分布式数 ...
分类:
数据库 时间:
2018-11-13 14:31:21
阅读次数:
206
前言 俗话说的好,冰冻三尺非一日之寒,滴水穿石非一日之功,罗马也不是一天就建成的。两周前秒杀案例初步成型,分享到了中国最大的同性交友网站-码云。同时也收到了不少小伙伴的建议和投诉。我从不认为分布式、集群、秒杀这些就应该是大厂的专利,在互联网的今天无论什么时候都要时刻武装自己,只有这样,也许你的春天就 ...
分类:
编程语言 时间:
2018-11-12 11:26:26
阅读次数:
160
Hadoop2.7.3+HBase1.2.5+ZooKeeper3.4.6搭建分布式集群环境 一、环境说明 个人理解:zookeeper可以独立搭建集群,hbase本身不能独立搭建集群需要和hadoop和hdfs整合 集群环境至少需要3个节点(也就是3台服务器设备):1个Master,2个Slave ...
分类:
其他好文 时间:
2018-11-06 17:50:02
阅读次数:
234
工作1-5年。当我们向老板提出加薪的时候,或者跳槽去“捡”offer的时候。我们底气够吗? 敢不敢不给涨薪就“挥一挥衣袖。不带走一个bug”?是不是提出要求后你的主管、经理立马 允许,为了把你留住。然而,现实往往是... 技术只是硬,其它的都免谈。 小编给大家罗列一下最近最经常使用,最火的技术,大家 ...
分类:
编程语言 时间:
2018-11-02 14:27:35
阅读次数:
237
环境搭建 CentOS集群搭建 写在前面 最近有许多小伙伴问我,大数据的hadoop分布式集群该如何去搭建。所以,想着,就写一篇博客,帮助到更多刚入门大数据的人。本博客会一步一步带你实现一个Hadoop的搭建。跟着博客上面的步骤,很详细的。你很快就会有一个自己的hadoop集群啦。 我是在自己的wi ...
分类:
其他好文 时间:
2018-10-31 15:50:49
阅读次数:
170
分布式:针对同一个服务的多个子服务,每个子服务各不相同,然后把每个子服务分别部署到独立的服务器上,实现分布式。 集群:针对同一个服务,将同一个服务部署到多个独立的服务器上,每个服务器上运行的都是同一个服务,这些服务器集体构成了一个服务器的集群。集群通常需要一个负载均衡服务器来分配访问请求到这些服务器 ...
分类:
其他好文 时间:
2018-10-28 00:50:33
阅读次数:
214
本博文集群搭建没有实现Hadoop HA,详细文档在后续给出,本次只是先给出大概逻辑思路。 (一)hadoop2.x版本下载及安装 Hadoop 版本选择目前主要基于三个厂商(国外)如下所示: 基于Apache厂商的最原始的hadoop版本, 所有发行版均基于这个版本进行改进。 基于HortonWo ...
分类:
其他好文 时间:
2018-10-16 22:07:44
阅读次数:
258
1、准备集群搭建环境 使用6台虚拟机来搭建MySQL分布式集群,相应的实验环境与对应的MySQL节点之间的对应关系如下图所示: 管理节点(MGM):这类节点的作用是管理MySQLCluster内的其他节点,如提供配置数据,并停止节点,运行备份等。由于这类节点负责管理其他节点的配置,应该在启动其他节点 ...
分类:
数据库 时间:
2018-10-16 17:36:57
阅读次数:
217
区块链快速入门(二)——分布式系统核心技术一、分布式系统的一致性问题1、分布式系统的一致性问题随着摩尔定律碰到瓶颈,越来越多情况下要依靠可扩展的分布式架构来实现海量处理能力。单点结构演变到分布式结构,首要解决的问题就是数据的一致性。如果分布式集群中多个节点不能保证处理结果的一致性,建立在其上的业务系统将无法正常工作。区块链系统是一个典型的分布式系统,在设计上必然也要考虑一致性问题。在面向大规模复杂
分类:
其他好文 时间:
2018-10-14 17:43:16
阅读次数:
222