码迷,mamicode.com
首页 >  
搜索关键字:hadoop zookeeper    ( 18907个结果
公司dubbo更新情况
1.39.102.74.144云服务器有 /00yanqb/tomcat8_dubbo_admin ;可以直接启动来监控zookeeper注册的接口/http://39.102.74.144:8080/dubbo-admin-2.5.10/ root root 2.20201109更新website ...
分类:其他好文   时间:2020-11-10 11:02:06    阅读次数:8
Zookeeper的简单入门
Zookeeper 一、引言 在分布式环境下,如果舍弃springcloud,使用其他的分布式框架,那么注册中心,配置集中管理,集群管理,分布式锁,分布式任务,队列管理想单独实现怎么处理? 分布式系统面临的问题 ? 1、分布式系统如何实现对统一资源的访问,保证数据的一致性 ? 2、集群中的Maste ...
分类:其他好文   时间:2020-11-07 17:02:41    阅读次数:19
Hadoop namenode高可用性分析:QJM核心源代码解读
Hadoopnamenode高可用性分析:QJM核心源代码解读背景介绍HDFSnamenode在接受写操作时会记录日志,最早HDFS日志写本地,每次重启或出现故障后重启,通过本地镜像文件+操作日志,就能还原到宕机之前的状态,不会出现数据不一致。如果要做高可用(HA),日志写在单个机器上,这个机器磁盘出现问题,重启就恢复不了,导致数据不一致,出现的现象就是新建的文件不存在,删除成功的还在等诡异现象。
分类:其他好文   时间:2020-11-07 17:00:30    阅读次数:24
Hadoop使用实例
1.词频统计 a.下载喜欢的电子书或大量文本数据,并保存在本地文本文件中 b.编写map与reduce函数 c.本地测试map和reduce d.将文本数据上传到HDFS上 e.用hadoop streaming提交任务 f.查看运行结果 g.计算结果取回本地 ...
分类:其他好文   时间:2020-11-07 16:36:45    阅读次数:33
Hadoop使用实例
1.下载喜欢的电子书或大量文本数据,并保存在本地文件夹中 2.编写map与reduce函数 3.本地测试map与reduce 4.将文本数据上传至HDFS上 5.用hadoop streaming提交任务 6.查看运行结果 7.计算结果取回到本地 ...
分类:其他好文   时间:2020-11-07 16:32:22    阅读次数:17
Hadoop实例
1.下载喜欢的电子书或大量文本数据,并保存在本地文本文件中 2编写map与reduce函数 3本地测试map与reduce 4将文本数据上传至HDFS上 5.用hadoop streaming提交任务 6.查看运行结果 7.计算结果取回到本地 ...
分类:其他好文   时间:2020-11-07 16:17:20    阅读次数:18
TXT格式文件插入Hbase
将.txt格式文件插入Hbase中,代码如下 package addHbase; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.HBaseConfiguration; import org.ap ...
分类:其他好文   时间:2020-11-06 02:49:19    阅读次数:37
111
import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.*;import org.apache.hadoop.hbase.client.*;import org.apache.hadoop.hbase.ut ...
分类:其他好文   时间:2020-11-06 01:37:17    阅读次数:15
知乎 HBase 实践
知乎HBase实践前言HBase是一个基于Hadoop面向列的非关系型分布式数据库(NoSQL),设计概念来源于谷歌的BigTable模型,面向实时读写、随机访问大规模数据集的场景,是一个高可靠性、高性能、高伸缩的分布式存储系统,在大数据相关领域应用广泛.HBase系统支持对所存储的数据进行透明切分,从而使得系统的存储以及计算具有良好的水平扩展性.知乎从2017年起开始逐渐采用HBase系统存储各
分类:其他好文   时间:2020-11-06 01:07:32    阅读次数:22
DolphinScheduler搭建与采坑日记
#用于搭建ds1.3.2版本 #一:需要提前安装的框架及版本 ·PostgreSQL (8.2.15+) or MySQL (5.7系列) : 两者任选其一即可 ·JDK (1.8+) : 必装,请安装好后在/etc/profile下配置 JAVA_HOME 及 PATH 变量 ·ZooKeeper ...
分类:其他好文   时间:2020-11-04 19:12:53    阅读次数:18
18907条   上一页 1 ... 26 27 28 29 30 ... 1891 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!