重点组件:HDFS:分布式文件系统MAPREDUCE:分布式运算程序开发框架Hive:基于大数据技术(文件系统+运算框架)的SQL数据仓库工具Hbase:基于Hadoop的分布式海量数据库ZOOKEEPER:分布式协调服务基础组件Mahout:基于mapreduce/Spark/flink等分布式运算框架的机器学习算法库Ooz..
分类:
其他好文 时间:
2017-07-26 21:53:45
阅读次数:
180
本文参考以下链接:http://www.cnblogs.com/yuyijq/p/4116365.htmlZookeeper-Zookeeperleader选举http://www.cnblogs.com/yuyijq/p/3424473.htmlZookeeper-Zookeeper可以干什么http://www.cnblogs.com/yuyijq/p/3391945.htmlZookeeper--Zookeeper是什么那分布式协调服务又是个..
分类:
其他好文 时间:
2017-07-18 21:04:57
阅读次数:
127
ZooKeeper是一个开源的分布式协调服务,由雅虎创建,是Google Chubby的开源实现。分布式应用程序可以基于ZooKeeper实现诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知、集群管理、Master选举、分布式锁和分布式队列等功能。 ...
分类:
其他好文 时间:
2017-07-07 13:23:21
阅读次数:
146
ZooKeeper是干啥的? ZooKeeper是一个开源的分布式协调服务,他为分布式应用提供了高效且可靠的分布式协调服务,提供了诸如统一命名空间服务,配置服务和分布式锁等分布式基础服务。 ZooKeeper基本概念 集群角色 和Paxos算法中的集群角色类型,ZooKeeper中包含Leader、 ...
分类:
其他好文 时间:
2017-06-26 01:14:01
阅读次数:
255
一.概述 清明节的时候写了一篇分布式锁概述,里面介绍了分布式锁实现的几种方式,其实那时候我一直沉迷于使用redis的悲观锁和乐观锁来实现分布式锁,直到一个血案的引发才让我重新认识了redis分布式锁的弊端,所以才痛定思痛潜心研究Zookeeper;自己装了三台Centos虚拟机,搭建了ZooKeep ...
分类:
其他好文 时间:
2017-06-03 20:10:56
阅读次数:
243
Zookeeper是一个分布式协调服务;就是为用户的分布式应用程序提供协调服务 A、zookeeper是为别的分布式程序服务的 B、Zookeeper本身就是一个分布式程序(只要有半数以上节点存活,zk就能正常服务) C、Zookeeper所提供的服务涵盖:主从协调、服务器节点动态上下线、统一配置管 ...
分类:
其他好文 时间:
2017-05-23 12:10:27
阅读次数:
187
Zookeeper 是 Google 的 Chubby一个开源的实现,是 Hadoop 的分布式协调服务 它包含一个简单的原语集,分布式应用程序可以基于它实现同步服务,配置维护和命名服务等 下面简单谈一谈zookeeper: zookeeper本身自己就是一个集群,它提供少量数据的存储和管理。客户端 ...
分类:
其他好文 时间:
2017-04-15 12:14:29
阅读次数:
135
ZooKeeper 作用:Zookeeper 可以用来保证数据在zk集群之间的数据的事务性一致(原子操作)。 介绍:Zookeeper 是 Google 的 Chubby一个开源的实现,是 Hadoop 的分布式协调服务。 它包含一个简单的原语集,分布式应用程序可以基于它实现同步服务,配置维护和命名 ...
分类:
其他好文 时间:
2017-04-06 01:06:00
阅读次数:
231
1. Zookeeper概念简介: Zookeeper是一个分布式协调服务;就是为用户的分布式应用程序提供协调服务 管理(存储,读取)用户程序提交的数据; 并为用户程序提供数据节点监听服务; 2. zookeeper集群机制 半数机制:集群中半数以上机器存活,集群可用。 zookeeper适合装在奇 ...
分类:
其他好文 时间:
2017-04-04 23:23:32
阅读次数:
270
云计算越来越流行的今天,单一机器处理能力已经不能满足我们的需求,不得不采用大量的服务集群。服务集群对外提供服务的过程中,有很多的配置需要随时更新,服务间需要协调工作,这些信息如何推送到各个节点?并且保证信息的一致性和可靠性? 众所周知,分布式协调服务很难正确无误的实现,它们很容易在竞争条件和死锁上犯 ...
分类:
其他好文 时间:
2017-04-01 00:54:52
阅读次数:
198