随着服务器的增多，感觉查看日志花费的时间已经越来越多，而且也各种不大方便，所以想着集中到一台服务器上来处理。害怕用过之后就忘记了，所以特此做个记录因为我的LNMP环境很早之前就已经搭好了。所以就直接用了。我也是参考这篇文章搭建的。http://www.cnblogs.com/mchina/p..
分类：
数据库 时间：
2015-04-09 12:12:12
阅读次数：
189
利用一个spark receiver 接收多个flume agentString host = args[0];
int port = Integer.parseInt(args[1]);
String host1 = args[2];
int port1 = Integer.parseInt(args[3]); InetSocketAddress address1 = new Ine...
分类：
Web程序 时间：
2015-04-08 18:09:37
阅读次数：
195
CentOS 7上yum安装的Haproxy，默认没有记录日志。需要做一下配置才能记录日志。
1.创建日志文件/var/log/haproxy/haproxy.log
cd /var/log
sudo mkdir haproxy
cd haproxy
sudo touch haproxy.log
sudo chmod a+w haproxy.log
2.开启rsyslog的h...
分类：
其他好文 时间：
2015-04-08 18:05:57
阅读次数：
144
Kafka+Storm+HDFS整合实践本文导读：1 前言2 Kafka安装配置3 Storm安装配置4 整合Kafka+Storm5 整合Storm+HDFS6 整合Kafka+Storm+HDFS7 参考链接
分类：
其他好文 时间：
2015-04-08 16:21:02
阅读次数：
127
这个包主要是与Kafka度量相关的。一、KafkaTimer.scala对代码块的运行进行计时。仅提供一个方法: timer——在运行传入函数f的同时为期计时二、KafkaMetricsConfig.scala指定reporter类，以逗号分隔的reporter类，比如kafka.metrics.K...
分类：
其他好文 时间：
2015-04-08 10:38:22
阅读次数：
138
kafka.network包主要为kafka提供网络服务，通常不包含具体的逻辑，都是一些最基本的网络服务组件。其中比较重要的是Receive、Send和Handler。Receive和Send封装了底层的入站(inbound)和出站(outbound)字节传输请求，而Handler在此二者间做了一个...
分类：
Web程序 时间：
2015-04-08 09:07:36
阅读次数：
211
YARN的Shell操作与管理7.1启动YARNYARN有2个守护线程：ResourceManager、NodeManager。[hadoop@localhosthadoop-2.2.0]$sbin/yarn-daemon.shstartresourcemanager[hadoop@localhosthadoop-2.2.0]$sbin/yarn-daemon.shstartnodemanager7.2YARNWeb管理界面YARN管理地址：Resource..
分类：
其他好文 时间：
2015-04-07 19:59:25
阅读次数：
305
HDFS的Shell操作与管理6.1启动HDFSStep01：格式化NameNode[hadoop@hadoop-yarnhadoop-2.2.0]$bin/hdfsnamenode–format说明：namenode在格式化的时候会产生一个ClusterID。也可以在格式化的时候自定义指定ID：bin/hdfsnamenode–format–clusteridyarn-clusterStep02：启动Nam..
分类：
系统相关 时间：
2015-04-07 19:58:53
阅读次数：
326
1.1Hadoop简介从Hadoop官网获得Hadoop的介绍：http://hadoop.apache.org/(1)WhatIsApacheHadoop?TheApacheHadoopprojectdevelopsopen-sourcesoftwareforreliable,scalable,distributedcomputing.TheApacheHadoopsoftwarelibraryisaframeworkthatallowsforthedistributedprocess..
分类：
Web程序 时间：
2015-04-07 19:58:46
阅读次数：
183
