脚本通过ssh检查大数据环境中各节点的相关实例是否运行正常，包括：zk、hadoop-ha、hdfs、yarn、hbase、hive-metastore、hiveserver2、kafka。 注意修改成自己的集群节点名称及kafka版本 #!/bin/bash # 定义机器名前缀 HN_PREFIX ...
分类：
系统相关 时间：
2020-06-20 16:44:49
阅读次数：
68
概念剖析 kafka的两种位移 关于位移（Offset），其实在kafka的世界里有两种位移： 分区位移：生产者向分区写入消息，每条消息在分区中的位置信息由一个叫offset的数据来表征。假设一个生产者向一个空分区写入了 10 条消息，那么这 10 条消息的位移依次是 0、1、…、9； 消费位移：消 ...
分类：
其他好文 时间：
2020-06-20 13:33:55
阅读次数：
60
配置 配置说明 dubbo:service 服务配置 dubbo:reference 引用配置 dubbo:protocol 协议配置 dubbo:applicatio n 应用配置 dubbo:module 模块配置 dubbo:registry 注册中心配置 dubbo:monitor 监控中心 ...
分类：
其他好文 时间：
2020-06-20 13:05:04
阅读次数：
51
根据IBM的统计报告显示，过去两年内，当今世界上90%的数据产生源于新设备、传感器以及技术的出现，数据增长率也会为此加速。而从技术上将，这意味着大数据领域，处理这些数据将变得更加复杂和具有挑战性。例如移动应用广告、欺诈检测、出租车预订、患者监控等场景处理时，需要对实时数据进行实时处理，以便做出快速可行的决策。目前业界有开源不少实时计算引擎，以Apache基金会的两款开源实时计算引擎最受欢迎，它们分
分类：
其他好文 时间：
2020-06-20 09:12:52
阅读次数：
230
本章要说的HW和LEO和ISR有关联，ISR之前总结过，这里不再说。 HW High Watermark（高水位），用于标识特定的offset，消费者只能拉取到HW之前的消息 LEO Log End Offset，某个分区要写入下一条消息的offset LSO Log Start Offset ，某 ...
分类：
其他好文 时间：
2020-06-19 22:52:13
阅读次数：
98
概念剖析 kafka的两种位移 关于位移（Offset），其实在kafka的世界里有两种位移： 分区位移：生产者向分区写入消息，每条消息在分区中的位置信息由一个叫offset的数据来表征。假设一个生产者向一个空分区写入了 10 条消息，那么这 10 条消息的位移依次是 0、1、…、9； 消费位移：消 ...
分类：
其他好文 时间：
2020-06-19 19:22:25
阅读次数：
64
@(Oracle SQL调优系列之SQL Monitor Report) 1、SQL Monitor简介 sql monitor是oracle官方提供的自动监控符合特定条件的SQL，用于收集执行时的细节信息的监控工具，常用于sql调优和系统性能监控 2、捕捉sql的前提 sql monitor 捕捉 ...
分类：
数据库 时间：
2020-06-19 16:29:09
阅读次数：
73
1.文件描述符的概念在shell程式中，最常使用的FD(filedescriptor)大概有三个,分别是:0是一个文件描述符，表示标准输入(stdin)1是一个文件描述符，表示标准输出(stdout)2是一个文件描述符，表示标准错误(stderr)在标准情况下,这些FD分别跟如下设备关联:stdin(0):keyboard键盘输入,并返回在前端stdout(1):monitor正确返回值输出到前端
分类：
系统相关 时间：
2020-06-19 15:49:58
阅读次数：
65
有6个功能相同的按钮，不想一个一个添加事件。在Designer里面绑定好，然后通过控件名字传入不同的参数。 1 private void ServoOff_Click(object sender, EventArgs e) 2 { 3 string name = ((Button)sender).N ...
nmcli [OPTIONS...] {help | general | networking | radio | connection | device | agent | monitor} [COMMAND] [ARGUMENTS...] 一:nmcli help 类似于ip,分成很多objec ...
分类：
Web程序 时间：
2020-06-19 00:37:37
阅读次数：
105
