openstack,swift的log不输出了。trouble shooting过程 ，发现我们的程序 /var/log/swift/proxy.log等总是不输出log。因为log rsyslog控制，所以这些log应该是 rsyslog进程打开lsof -p rsyslog 发现没有打开这些文件...
分类：
其他好文 时间：
2015-05-21 19:19:12
阅读次数：
121
Corosync+Pacemaker+Ldirectord+Lvs+Httpd一、硬件环境4台虚拟机在同一网段操作系统：centos6.3关闭系统不必要的服务脚本#!/bin/bash
services=`chkconfig--list|cut-f1|cut-d""-f1`
forserin$services
do
if["$ser"=="network"]||["$ser"=="rsyslog"]||["$ser"=="sshd"]||["$s..
分类：
Web程序 时间：
2015-05-21 12:56:10
阅读次数：
319
一：什么是日志所谓的日志，就是记录过去发生的事情，在Linux中可以使用日志功能对过去发生的事件进行记录，方便日后对服务器的运行状况进行分析。二：Rsyslog相关介绍Linux中日志按照其记录的类型可分为系统日志（syslog）和内核日志（klog），而记录的方式通常也有两种，就是..
分类：
其他好文 时间：
2015-05-20 15:05:08
阅读次数：
201
Heartbeat+Ldirectord+LVS+httpd集群部署一、硬件环境4台虚拟机在同一网段操作系统：centos6.3关闭系统不必要的服务脚本#!/bin/bash
services=`chkconfig--list|cut-f1|cut-d""-f1`
forserin$services
do
if["$ser"=="network"]||["$ser"=="rsyslog"]||["$ser"=="sshd"]||["$se..
分类：
Web程序 时间：
2015-05-20 09:59:01
阅读次数：
253
kafka简介Kafka由linkedln开发，主要用于处理linkedln的大面积的活跃数据流（active stream）。此类数据经常用于反应网站的一些有用信息，如uv或pv。它是一个分布式的消息发布和订阅系统，由producer发布，broker存储、consusmer消费组成。安装为分布式...
分类：
其他好文 时间：
2015-05-20 02:04:41
阅读次数：
236
首先感谢 kafka 中国社区 王扬庭例子的帮助和指导~~~~~（kafka_2.9.2-0.8.1.1）kafka常用的发送消息的方法如下：Properties props = new Properties();props.put("zookeeper.connect", "slaves2:218...
分类：
其他好文 时间：
2015-05-19 18:44:14
阅读次数：
199
近日，在测试Flume结合Kafka结合SparkStreaming的实验。今天把Flume与Spark的简单结合做出来了，这里记录一下，避免网友走弯路。有不周到的地方还希望路过的大神多多指教。实验比较简单，分为两部分：一、使用avro-client发送数据二、使用netcat发送数据首先Spark程序需要Flume..
分类：
Web程序 时间：
2015-05-19 07:32:40
阅读次数：
1969
系统是centos6.5x64服务器端yuminstall-yrsyslogmkdir/data/logvi/etc/sysconfig/rsyslog#SYSLOGD_OPTIONS="-c5"#r表示允许接收，x表示不需要DNS解析，m表示立即同步0表示关闭SYSLOGD_OPTIONS="-r-x-m0"cp/etc/rsyslog.conf/etc/rsyslog.conf.bakvim/etc/rsyslog.conf10$ModLoa..
分类：
其他好文 时间：
2015-05-18 21:06:09
阅读次数：
223
kafka是一个分布式的消息队列由scala编写，不同于传统的一些消息队列，kafka的设计理念与众不同。
1、kafka的特点
。快速
单台kafka的broker实例能够支撑几千台机器每秒几百兆字节的读写，如果组成集群性能会更强进，从很多人的测试情况来看kafka的读写性能表现不输于当前流行的消息队，甚至领先很多。
。扩展性
弹性透明的扩展，不需要停机，kafka的数据是分区的，可以...
分类：
其他好文 时间：
2015-05-18 01:13:38
阅读次数：
389
一、概要 1.1 Storm(简介) ? ? ?Storm是一个实时的可靠地分布式流计算框架。 ? ? ?具体就不多说了，举个例子，它的一个典型的大数据实时计算应用场景：从Kafka消息队列读取消息（可以是logs,clicks,sensor ...
分类：
其他好文 时间：
2015-05-17 21:59:55
阅读次数：
220
