HA 高可用集群概述及其原理解析 1. 概述 1）所谓HA（High Available），即高可用（7 24小时不中断服务）。 2）实现高可用最关键的策略是消除单点故障。HA严格来说应该分成各个组件的HA机制：HDFS 的HA和YARN的HA。 3）Hadoop2.0之前，在HDFS集群中Name ...
分类：
其他好文 时间：
2019-10-28 01:08:29
阅读次数：
582
ZooKeeper客户端命令行操作 1. 启动服务端 2. 查看状态信息 3. 启动客户端 4. 查看当前znode中所包含的内容 5. 查看当前节点的详细数据 6. 分别创建两个普通节点 7. 获得节点的值 8. 创建临时节点 （1）在客户端可以查看到 （2）退出当前客户端之后再重启客户端 （3） ...
分类：
其他好文 时间：
2019-10-26 01:19:20
阅读次数：
82
2/kafka配置文件参数详解默认必须配置的参数默认kafkaserver.properties配置如下：#############################ServerBasics##############################服务器基础知识#Theidofthebroker.Thismustbesettoauniqueintegerforeachbroker.#必须为每个代理
分类：
其他好文 时间：
2019-09-12 11:37:00
阅读次数：
116
Dubbo 阿里框架 ZooKeeper顾名思意：动物园管理员 它是拿来管大象(Hadoop)、蜜蜂(Hive)、小猪(Pig)的管理员， Apache Hbase和Apache Solr以及阿里的Dubbo等项目中都采用到了Zookeeper 。 一句话：ZooKeeper是一个分布式协调技术、高 ...
分类：
其他好文 时间：
2019-08-24 11:27:40
阅读次数：
87
1.zookeeper的数据结构: 层次化的目录结构，命名符合常规文件系统规范(见下图） 每个节点在zookeeper中叫做znode,并且其有一个唯一的路径标识 节点Znode可以包含数据和子节点（但是EPHEMERAL类型的节点不能有子节点，下一页详细讲解） 客户端应用可以在节点上设置监视器（后 ...
分类：
其他好文 时间：
2019-08-19 14:41:03
阅读次数：
96
1.Zookeeper的数据模型 (1) Zookeeper的数据模型，类似于树形结构： (2) Zookeeper的每一个节点成为称为Znode，主要用来存储数据。 (3) Znode的引用方式是路径引用，例如： /core/UserCoreService ...
分类：
其他好文 时间：
2019-07-16 14:04:00
阅读次数：
155
Zookeeper实现分布式锁 zookeeper实现分布式锁，主要得益于ZooKeeper保证了数据的强一致性这一特性。锁服务可以分为两类，一个是保持独占，另一个是控制时序。 1. 保持独占，就是所有试图来获取这个锁的客户端，最终只有一个可以成功获得这把锁。通常的做法是把zk上的一个znode看作 ...
分类：
其他好文 时间：
2019-07-11 12:39:25
阅读次数：
107
1.zookeeper的ACL(访问控制列表) znode被创建时带有一个ACL列表(默认为word,表示anyone) ACL包括： scheme(验证方式):zookeeper提供了以下几种验证方式： digest：客户端用户名和密码。 auth：不适用任何id。 ip：IP地址验证。 word ...
分类：
其他好文 时间：
2019-06-06 19:12:32
阅读次数：
104
一. 分布式安装部署 1.0 下载地址 官网首页： https://zookeeper.apache.org/ 下载地址： http://mirror.bit.edu.cn/apache/zookeeper/ 1.1 集群规划 在node21、node22和ode23三个节点上部署Zookeeper ...
分类：
其他好文 时间：
2019-03-25 10:55:54
阅读次数：
253
1、运行zookeeper主目录下的zkCli.sh，即进入zookeeper的命令行工具。 2、查看znode路径 ls / 查看根路径下的节点 3、获取znode数据 get /zookeeper 获取/zookeeper这个节点下面的数据 4、监听znode事件 ls /test watch ...
分类：
其他好文 时间：
2019-02-12 21:36:11
阅读次数：
192
