Flume简介
Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。
系统功能
日志收集
Flume最早是Cloud...
分类:
其他好文 时间:
2014-07-28 14:41:13
阅读次数:
491
Description你有一个日志文件,里面记录着各种系统事件的详细信息。自然的,事件的时间戳按照严格递增顺序排列(不会有两个事件在完全相同的时刻发生)。遗憾的是,你的系统被病毒感染了,日志文件中混入了病毒生成的随机伪事件(但真实事件的相对顺序保持不变)。备份的日志文件也被感染了,但由于病毒采用的随...
分类:
其他好文 时间:
2014-07-28 14:34:23
阅读次数:
223
DenyHosts是Python语言写的一个程序,它会分析sshd的日志文件(/var/log/secure),当发现重复的攻击时就会记录IP到/etc/hosts.deny文件,从而达到自动屏IP的功能DenyHosts官方网站http://denyhosts.sourceforge.net下载页面http://sourceforge.net/projects/denyhosts/files/t..
分类:
其他好文 时间:
2014-07-28 00:43:20
阅读次数:
291
最近在开发实战中,遇到了一个这样的技术情景:
把log4j生成的日志文件定时刷进MySQL数据库,比如三个小时刷一次,那么每次刷数据的时候,如何控制文件读取是从上一次文件读取结束的地方开始继续读取的?并且本次要读取到文件结尾处。在网上各种搜索提问后,找到了一个叫RandomAccessFile Java类解决了问题。
先上代码:
static int size=1;//主...
分类:
编程语言 时间:
2014-07-26 17:24:12
阅读次数:
554
-------------------------------------------------------------------------------------------1、查询当前日志组21:43:00sys@TESTDB11>select*fromv$log;1136524288005121NOCURRENT13498242、查询日志文件21:42:44sys@TESTDB11>select*fromv$logfile;GROUP#STATUSTYPE..
分类:
其他好文 时间:
2014-07-26 03:13:08
阅读次数:
226
场景描述:系统启动之后,将分区挂载到/var目录下,保存日志文件到其他的硬盘分区之上。出现如下的问题:1重新挂载硬盘的分区到/var/log,接收系统的日志如果已经指向一个设备,重新挂载到一个设备,以前的将被覆盖2startingsystemlogger:cannotopenorcreate/var/run/syslogd.pi..
分类:
其他好文 时间:
2014-07-26 03:11:57
阅读次数:
599
UTF16的BOM头是FF FE,UTF8的BOM头是EF BB BF。但是用UltraEdit32打开UTF8文件,切换到HEX模式,会发现BOM头变成了FF FE。而且在打开log4j的UTF8编码的日志文件时,中文也会显示为乱码。为了避免烦恼,决定以后不用UltraEdit32打开UTF8文件...
分类:
其他好文 时间:
2014-07-26 00:53:36
阅读次数:
208
1、计算器的例子(手动添加,将结果写到日志文件中)SystemUtil.Run "C:\WINDOWS\system32\calc.exe","","C:\WINDOWS\system32","open"Window("计算器").WinButton("1").ClickWindow("计算器")....
分类:
其他好文 时间:
2014-07-26 00:35:56
阅读次数:
272
2014-07-26 BaoXinjian一、 Oracle体系结构基本概念1. Oracle总体结构分为三个部分第一部分:系统全局区(SGA)第二部分:程序全局区和后台进程第三部分:Oracle的文件2. 从功能角度接那些划分存储结构包括: 控制文件、数据文件和日志文件作用: 由这些文件就构成了O...
分类:
数据库 时间:
2014-07-26 00:18:37
阅读次数:
396
登录到服务器查看的时候,发现工作目录中有很多日志文件和core文件pwd :/home/work/anti-rw-rw-r-- 1 work work 2738 Jul 18 21:22 14_07_18.log-rw-rw-r-- 1 work work 1829 Jul 19 02...
分类:
其他好文 时间:
2014-07-25 02:54:24
阅读次数:
274