1）haproxy配置文件log127.0.0.1local1notice#此处使用系统的rsyslog来处理日志2）rsyslog配置【/etc/rsyslog.conf】local0.*/var/log/haproxy.log取消如下注释：#$ModLoadimudp==》$ModLoadimudp#$UDPServerRun514==》$UDPServerRun5143）核实services文件grep514/etc/service..
分类：
系统相关 时间：
2016-06-01 06:54:52
阅读次数：
137
1）haproxy配置文件log127.0.0.1local1notice#此处使用系统的rsyslog来处理日志2）rsyslog配置【/etc/rsyslog.conf】local0.*/var/log/haproxy.log取消如下注释：#$ModLoadimudp==》$ModLoadimudp#$UDPServerRun514==》$UDPServerRun5143）核实services文件grep514/etc/service..
分类：
系统相关 时间：
2016-06-01 06:54:34
阅读次数：
554
一、AOP是什么
AOP：面向方面编程，他是一种编程范式，提供从另外一个角度来考虑程序结构以完善面向对象编程。
二、AOP的功能
在系统开发过程中会有一些共性的功能，这是面向对象的纵向思考方式就能解决问题了，这时候AOP横向延伸就可以解决这些公共服务织入系统中。AOP能够将那些与业务无关，却为业务模块所共同调用的逻辑或责任，比如事务处理、日志处理、权限控制封装起来，便于减少系...
分类：
其他好文 时间：
2016-05-27 11:55:53
阅读次数：
209
程序主结构:两个程序集DLL，一个OpticalAlarm（主程序），一个OpticalAlarm.Common 问题描述：搭建程序框架时，使用了log4net进行日志处理，在OpticalAlarm.Common编写好后进行生成，成功无错误，在主程序中引用OpticalAlarm.Common.D ...
分类：
其他好文 时间：
2016-05-26 18:44:08
阅读次数：
245
今天检查系统日志发现有，日志中都是以下格式的日志：Apr2209:26:26
jsmapp4xinetd[3158]:EXIT:nrpestatus=0pid=14006duration=0(sec)Apr2209:26:27
jsmapp4xinetd[3158]:EXIT:nrpestatus=0pid=14316duration=1(sec)Apr2209:26:27
jsmapp4xinetd[3158]:EXIT:nrpestatus=0pid=14..
分类：
其他好文 时间：
2016-04-22 16:47:48
阅读次数：
459
大数据量存储：分布式存储 日志处理: Hadoop擅长这个 海量计算: 并行计算 ETL:数据抽取到oracle、mysql、DB2、mongdb及主流数据库 使用HBase做数据分析: 用扩展性应对大量的写操作—Facebook构建了基于HBase的实时数据分析系统 机器学习: 比如Apache ...
分类：
其他好文 时间：
2016-04-18 11:23:50
阅读次数：
129
在本地文件上传至HDFS过程中，很多情况下一个目录包含很多个文件，而我们需要对这些文件进行筛选，选出符合我们要求的文件，上传至HDFS。这时就需要我们用到文件模式。 在项目开始前，我们先掌握文件模式 1、文件模式 在某个单一操作中处理一系列文件是很常见的。例如一个日志处理的MapReduce作业可能 ...
分类：
编程语言 时间：
2016-04-16 10:53:32
阅读次数：
203
统一日志处理实现类： package com.pilelot.web.util; import org.aopalliance.intercept.MethodInterceptor; import org.aopalliance.intercept.MethodInvocation; import ...
分类：
编程语言 时间：
2016-04-11 18:18:12
阅读次数：
214
本次模拟系统，是利用Hadoop等组件来模拟巨型日志的处理系统，包括Python定时、Flume收集日志、MR处理日志、Sqoop导出数据、Hive的简单统计等...
分类：
其他好文 时间：
2016-04-09 17:03:16
阅读次数：
267
前提：处理大数据日志收集分析，随着搜索集群的快速膨胀，大量日志处理及情况反馈滞后带来一系列问题，亟需一个工具能快速分析定位集群中那种日志或那个机器出现了异常。运维的日志分析系统定制化较重，分析不够实时。故找一个RTF工具可以直接即上手。1、简介：logstash日志收..
分类：
其他好文 时间：
2016-03-04 16:35:09
阅读次数：
436
