1. 安装Docker，详细请看安装教程。若已安装，请看 2. 2. 拉取 Zookeeper 镜像 docker pull zookeeper 3. Zookeeper 单节点启动 docker run --name zk1 -d zookeeper 4. 修改镜像中 Zookeeper 的配置 ...
分类：
其他好文 时间：
2021-03-10 13:00:14
阅读次数：
0
伪集群安装 下载zookeeper-3.4.14.tar.gz 创建zkcluster目录 mkdir zkcluster 解压压缩包 tar -zxvf zookeeper-3.4.14.tar.gz -C /zkcluster 修改文件名称： mv zookeeper-3.4.14/ zooke ...
分类：
其他好文 时间：
2021-03-09 13:48:41
阅读次数：
0
##脑裂前提 脑裂(split-brain)就是“大脑分裂”，也就是本来一个“大脑”被拆分了两个或多个“大脑”。脑裂通常会出现在集群环境中，比如ElasticSearch、Zookeeper集群，而这些集群环境有一个统一的特点，就是它们有一个大脑，比如ElasticSearch集群中有Master节 ...
分类：
其他好文 时间：
2021-03-09 13:11:53
阅读次数：
0
Observer的作用：水平扩展zookeeper集群 虽然通过Client直接连接到ZooKeeper集群的性能已经很好了，可是这样的架构假设要承受超大规模的Client，就必须添加ZooKeeper集群的Server数量，随着Server的添加，ZooKeeper集群的写性能必定下降。我们知道Z ...
分类：
其他好文 时间：
2021-03-09 13:01:21
阅读次数：
0
hadoop集群安装 安装环境服务部署规划 服务器IP node01 node02 node03 HDFS NameNode HDFS SecondaryNameNode HDFS DataNode DataNode DataNode YARN ResourceManager YARN NodeMa ...
分类：
其他好文 时间：
2021-03-09 12:59:55
阅读次数：
0
zookeeper相关命令 zk服务器端命令 命令 功能 zkServer.sh start 启动zookeeper zkServer.sh stop 关闭zookeeper zkServer.sh restart 重启zookeeper zkServer.sh status 查看zookeeper ...
分类：
其他好文 时间：
2021-03-08 14:13:29
阅读次数：
0
分布式理论 《分布式系统原理与范型》中如下定义：“分布式系统是若干独立计算机的集合，这些计算机对于用户来说就像单个相关系统”； 分布式系统是由一组通过网络进行通信，为了完成共同的任务而协调工作的计算机节点组成的系统。分布式系统的出现是为了用链家的普通的机器完成单个计算机无法完成的计算、存储任务。其目 ...
分类：
其他好文 时间：
2021-03-06 14:54:07
阅读次数：
0
hadoop大数据集群搭建过程中，需要使用到zookeeper进行主从管理和控制，那我们就安装一套集群环境 1、下载zookeeper 登录zookeeper.apache.org官网，找到Getting Started下边的Download。 进去之后我们选择一个版本，比如选择3.6.2，进去后选 ...
分类：
其他好文 时间：
2021-03-06 14:45:39
阅读次数：
0
配置文件 mapred-site.xml 加入以下代码 <!-- 历史服务器端地址 --> <property> <name>mapreduce.jobhistory.address</name> <value>hadoop102:10020</value> </property> <!-- 历史服 ...
分类：
其他好文 时间：
2021-03-06 14:37:58
阅读次数：
0
杀死进程 $HADOOP_HOME/sbin/stop-yarn.sh $HADOOP_HOME/sbin/stop-dfs.sh 删除所有节点 hadoop 根目录下的 data 和 logs rm -rf data/ logs/ 格式化 在 hadoop 根目录下执行 hdfs namenode ...
分类：
其他好文 时间：
2021-03-06 14:35:10
阅读次数：
0
