一、broker的迁移1.查看zookeeper和kafka启动情况[root@slave1 ~]# pssh -h hostlist -i 'jps'
[1] 22:08:11 [SUCCESS] 20.0.5.12
3492 QuorumPeerMain
8140 Jp
分类：
其他好文 时间：
2018-01-22 13:01:02
阅读次数：
219
1、 先解压 2、 maven编译安装、(注意虚拟机采用nat网络模式，需要联网) mvn -Prelease-all -DskipTests clean install -U 启动nameser节点 启动broker nohup sh bin/mqbroker -n localhost:9876 ...
分类：
其他好文 时间：
2018-01-21 23:52:38
阅读次数：
507
Master-Slave： 读写分离，save复制master的数据。同步复制：保证了强一致性但是会影响高可用性，因为写入的时候要保证slave都写入了才能返回告诉生产者数据写入成功，如果slave过多就是时间过长。异步复制：数据写入master之后不要求所有的slave都写入就返回生产者写入成功，... ...
分类：
其他好文 时间：
2018-01-21 17:31:37
阅读次数：
146
1，简介 RabbitMQ（Rabbit Message Queue）是流行的开源消息队列系统，用erlang语言开发。 1.1关键词说明： Broker：消息队列服务器实体。Exchange：消息交换机，它指定消息按什么规则，路由到哪个队列。Queue：消息队列载体，每个消息都会被投入到一个或多个 ...
分类：
编程语言 时间：
2018-01-21 00:09:12
阅读次数：
185
kafka架构： 生产者，消费者，Broker（接收生产者消息，给消费者订阅，），ZooKeeper（不是kafka的一部分，只是要使用ZooKeeper）。 Broker和ZooKeeper作为后台服务，生产者,消费者作为sdk，可以通过生产者的sdk发送数据给Broker，通过消费者的sdk从B... ...
分类：
其他好文 时间：
2018-01-19 21:29:44
阅读次数：
133
OffsetManager主要提供对offset的保存和读取，每个broker都有一个OffsetManager实例，kafka管理topic的偏移量有2种方式： 1、ZookeeperOffsetManager：调用zookeeper来存储和接收offset Consumer offset:/co ...
分类：
其他好文 时间：
2018-01-18 19:33:44
阅读次数：
410
架构： celery:分布式异步消息任务队列，一般使用rabbitmq或者redis做broker,分发任务 mongoDB:存储任务信息，存储测量结果.可视化链接工具 robo3t. RabbitMQ:消息队列 SQLite:持久化定时任务 tornado:异步，非阻塞web框架。 ...
分类：
其他好文 时间：
2018-01-17 00:25:55
阅读次数：
154
今天发现有一个 oracle 物理DataGuard apply比较慢，根据官方dg 优化文档修改相关参数，下面的方法有一点效果，不过不大。1、修改并行度ALTER DATABASE RECOVER MANAGED STANDBY DATABASE PARALLEL 8 using current ...
分类：
移动开发 时间：
2018-01-17 00:05:50
阅读次数：
227
环境准备 主库 primary 10.63.230.10 备库 standby 10.63.230.13 软件版本 Oracle 11.2.0.4.0 搭建步骤 --主库 1.查看归档开启状态 SQL> archive log list; 2.创建归档目录 mkidr /oradata/arch 3 ...
分类：
其他好文 时间：
2018-01-17 00:02:57
阅读次数：
227
