oracle dataguard archive gap后恢复dataguard,解决gap后datafile rename,新增数据文件问题
分类：
数据库 时间：
2018-07-08 14:37:30
阅读次数：
271
kafka的offset保存位置分为两种情况0.9.0.0版本之前默认保存在zookeeper当中0.9.0.0版本之后保存在broker对应的topic当中1.如何辨别你启用的consumer的offset保存位置进入zookeeper的命令行当中zkCli.shlocalhost:2181用ls/查看目录如果你在代码中定义的groupid没有在/consumers这个文件夹中，代表offset
分类：
其他好文 时间：
2018-07-04 11:41:25
阅读次数：
2256
kafka在Zookeeper上的节点如下图： 该图片盗自大牛的博客http://blog.csdn.net/lizhitao/article/details/23744675 服务端开启的情况下，进入客户端的命令：{zookeeper目录}/bin/zkCli.sh 以下是几个zookeeper客 ...
分类：
其他好文 时间：
2018-07-03 15:20:47
阅读次数：
161
熟悉 Kafka的同学肯定知道，每个主题有多个分区，每个分区会存在多个副本，本文今天要讨论的是这些副本是怎么样放置在 Kafka集群的 Broker 中的。 大家可能在网上看过这方面的知识，网上对这方面的知识是千变一律，都是如下说明的： 为了更好的做负载均衡，Kafka尽量将所有的Partition ...
分类：
其他好文 时间：
2018-07-03 14:51:05
阅读次数：
177
管理kafka 主题操作 1.在集群里创建一个主题需要用到3个参数。这些参数是必须提供的，尽管有些已经有broker级别的默认值。 主题名字，想要创建的主题的名字，主题名字可以包含字母，数字，下划线以及英文状态下破折号和句号。 复制系数，主题的副本数量 分区，主题的分区数量 指定主题配置 可以在创建 ...
分类：
其他好文 时间：
2018-06-30 01:04:41
阅读次数：
378
Producer Producer：生产者，一个生产者发送业务应用系统生成的数据给Brokers（经纪人）。RocketMQ提供多范式发送：同步，异步，一站式。 Producer Group:生产者组，是将同样角色生产者的分组在一起。同一生产组的不同生产者实例都会被Broker经纪人联络告知提交或者 ...
分类：
其他好文 时间：
2018-06-29 16:24:52
阅读次数：
201
集群成员关系 kafka使用Zookeeper 来维护集群成员的信息。每个broker都有一个唯一标识符，这个标识符可以在配置里指定，也可以自动生成。在broker启动的时候，它通过创建临时节点把自己的ID注册到Zookeeper。kafka组件订阅Zookeeper的/brokers/ids路径， ...
分类：
其他好文 时间：
2018-06-28 00:59:40
阅读次数：
208
创建kafka生产者 要往kafka写入消息，首先要创建一个生产者对象，并设置一些熟悉。kafka生产者有3个必选的属性。 1.bootstrap.servers 该属性指定broker的地址清单，地址的格式为host:port 一般建议至少要提供两个broker的信息，一旦其中一个宏机，生产者仍然 ...
分类：
其他好文 时间：
2018-06-26 18:37:03
阅读次数：
737
flume：用来搜集日志，将日志传输至kakfa kafka：作为缓存，存储来自flume的日志 es：作为存储媒介，存放日志 logstash：真对日志进行过滤处理 flume部署 获取安装包、解压 修改flumen-env.sh脚本，设置启动参数 编辑配置文件 创建kafka的topic 启动f ...
分类：
Web程序 时间：
2018-06-26 18:01:46
阅读次数：
357
broker.id 唯一编号，每台不一样 host.name 本机host名称 num.network.threads 消息处理最大线程数，推荐cpu核数加1 num.io.threads 处理磁盘IO线程数，推荐cpu*2 socket.send.buffer.bytes=102400 #发送缓冲 ...
分类：
其他好文 时间：
2018-06-26 15:02:58
阅读次数：
129
