zookeeper简介: ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。 ZooKeeper的目 ...
分类:
其他好文 时间:
2020-06-17 09:16:36
阅读次数:
76
随着互联网和云计算的发展及企业业务创新的需要,企业的IT资产越来越多,参与运维的岗位也越来越多样,当IT资产和运维团队达到一定规模时,对IT资产的日常管理和运维过程都会变得复杂且混乱。由此,海量资产的运维成为了企业急需解决的问题。本文将通过一个具体的实例,介绍面对海量资产运维的行云管家应对之道。一、案例介绍:某知名银行的金融科技公司,下设架构部、基础运维组以及100多个FT项目组,架构部与基础运维
分类:
其他好文 时间:
2020-06-17 01:38:15
阅读次数:
140
1、数字通信中通常用码元传输速率和信息传输速率表示。2、比特率=波特率单个调制状态对应的二进制位数=Blog2^N(相当于2的多少次立方等于N),比如log2^8=33、信噪比与分贝,通常用信号功率记为S,噪声功率记为N,则信噪比为S/N,常用logS/N的值,即分贝:1dB=10*logS/N在无噪声的数据速率计算应依据尼奎斯特定理来计算最大数据速率=2Wlog2N=Blog2N其中W为带宽,B
分类:
其他好文 时间:
2020-06-17 01:35:42
阅读次数:
76
scribe_百度百科 https://baike.baidu.com/item/scribe flume(日志收集系统)_百度百科 https://baike.baidu.com/item/flume/6250098 Kafka(科技术语)_百度百科 https://baike.baidu.com ...
分类:
其他好文 时间:
2020-06-16 20:48:33
阅读次数:
58
1、引入 为什么要学习爬虫,学习爬虫能够为我们以后的发展带来那些好处?其实学习爬虫的原因和为我们以后发展带来的好处都是显而易见的 我们都知道,当前我们所处的时代是大数据的时代,在大数据时代,要进行数据分析,首先要有数据源,而学习爬虫,可以让我们获取更多的数据源,并且这些数据源可以按我们的目的进行采集 ...
分类:
编程语言 时间:
2020-06-16 20:40:45
阅读次数:
77
通过交换机集群,可以实现网络高可靠性和网络大数据量转发,同时简化网络管理。高可靠性:集群系统两台成员交换机之间冗余备份,同时利用链路聚合功能实现跨设备的链路冗余备份。
分类:
其他好文 时间:
2020-06-16 14:58:31
阅读次数:
73
点击 icon input 同步获取焦点,且点击input不可以获取焦点。 代码: html <el-form :model="dataLabel.basePopulationLabels" label-width="80px" size="mini"> <el-form-item label="姓 ...
分类:
其他好文 时间:
2020-06-16 14:51:17
阅读次数:
63
1,在hdfs-site.xml 中配置多目录,提前配置好,以免以后要配置时,需要重启集群。 2,namenode 有一个工作线程池,用来处理不同的datanode的并发心跳和客户端访问并发请求。配置dfs.namenode.handler.count=20 * log2(Cluster Size) ...
分类:
其他好文 时间:
2020-06-16 13:33:15
阅读次数:
64
1,如果预聚合不影响最终结果,可以使用conbine,提前对数据聚合,减少数据量。 2,使用2次mr的方式。第一次mr,在map输出是给key加上一个前缀,则可以把相同的key分配到不同的reduce聚合,可以实现同一个key数据量大的问题;第二次mr对把第一次mr输出的数据的key去掉前缀,在聚合 ...
分类:
其他好文 时间:
2020-06-16 13:24:44
阅读次数:
54
把Java打包成jar的步骤: 右击项目,找到export确定 然后在export弹窗中找到Java文件 Java->Runnable JAR file,后点击next 最后选择要打包的项目,存放打包项目的位置,然后finish就可以进行打包了。 在Linux上运行Hadoop jar hadoop ...
分类:
编程语言 时间:
2020-06-16 13:05:18
阅读次数:
103