事务日志的持久化是在SyncRequestProcessor类中实现，并会按照一定的规则滚动日志（关闭当前文件，创建一个新文件），以及生成新的Snapshot。在持久化过程中，使用组提交(Group Commits)来优化磁盘io 操作。组提交是指将多个Request对象的事务作为一次写附加到磁盘上。使用这种方式可以在持久化多个事务的时候，只使用一次磁盘寻道(Disk Seek)的开销。...
分类：
其他好文 时间：
2015-03-04 09:55:32
阅读次数：
222
作者Michael G. Noll是瑞士的一位工程师和研究员，效力于Verisign，是Verisign实验室的大规模数据分析基础设施（基础Hadoop）的技术主管。本文，Michael详细的演示了如何将Kafka整合到Spark Streaming中。 期间， Michael还提到了将Kafka整合到 Spark Streaming中的一些现状，非常值得阅读，虽然有一些信息在Spark 1.2版...
分类：
其他好文 时间：
2015-03-03 15:11:59
阅读次数：
269
前面已经成功部署了zookeeper quorum, 现在来试用一下。在第四台机器上，同样下载解压zookeeper, 这次不需要部署，仅用自带的Java程序连接zookeeper服务, C程序也可以，不过要编译，具体参考src/c/README进入目录后执行命令连接/zkCli.sh -server zkc:2181键入help命令：help
ZooKeeper -server host:por...
分类：
其他好文 时间：
2015-03-03 13:36:14
阅读次数：
159
服务器使用事务日志来持久化事务。在接受一个提案之前，服务器（Follower和Leader)需要将提案中的事务持久化到事务日志中。事务日志是服务器本地磁盘的一个文件。事务按顺序附加到这个文件。服务器时不时的会关闭当前文件，创建一个新文件来滚动(Roll Over)日志。...
分类：
其他好文 时间：
2015-03-03 09:58:59
阅读次数：
171
standalone适合开发，因为是单机，因此不能作为产品环境使用。...
分类：
其他好文 时间：
2015-03-02 23:56:07
阅读次数：
259
ZooKeeper原生的API支持通过注册Watcher来进行事件监听，但是Watcher通知是一次性的，因此开发过程中需要反复注册Watcher，比较繁琐。Curator引入了Cache来监听ZooKeeper服务端的事件。Cache对ZooKeeper事件监听进行了封装，能够自动处理反复注册监听...
分类：
其他好文 时间：
2015-03-02 23:44:32
阅读次数：
10385
一.zookeeper简介 ? ??一款管理分布式应用程序的协调服务系统 二.zookeeper应用场景 ???? ????网上也有很多介绍，可以参见 ? ?http://blog.csdn.net/xinguan1267/article/details/38422149 本文主要...
分类：
编程语言 时间：
2015-03-02 17:04:45
阅读次数：
197
Zookeeper 初体验之——伪分布式安装简介Apache Zookeeper 是由 Apache Hadoop 的 Zookeeper 子项目发展而来，现在已经成为了 Apache 的顶级项目。Zookeeper 为分布式系统提供了高效可靠且易于使用的协同服务，它可以为分布式应用提供相当多的服务...
分类：
其他好文 时间：
2015-03-02 14:50:32
阅读次数：
101
一、创建会话1. 创建会话package com.huey.dream.demo;import org.apache.curator.framework.CuratorFramework;import org.apache.curator.framework.CuratorFrameworkFact...
分类：
其他好文 时间：
2015-03-01 23:34:45
阅读次数：
201
安装脚本说明：此脚本只适用与RHEL6.x系列；Nginx版本为1.6最新稳定版；PHP为5.4最新版；Mysql为5.5最新稳定版；Zabbix暂时为2.4最新版。#!/bin/bash
#installNginx1.6.2+mysql5.5.x+PHP-FPM5.4.x+Zabbix2.4.4automatically.
#TestedonCentOS6.5
#############################..
分类：
其他好文 时间：
2015-03-01 22:27:04
阅读次数：
457
