介绍
这套系统，logstash负责收集处理日志文件内容存储到elasticsearch搜索引擎数据库中。kibana负责查询elasticsearch并在web中展示。
logstash收集进程收获日志文件内容后，先输出到redis中缓存，另一logstash处理进程从redis中读出并转存到elasticsearch中，以解决读快写慢速度不一致问题。...
分类：
其他好文 时间：
2015-06-30 12:55:52
阅读次数：
204
Linux上通常可以通过rsyslog来实现系统日志的集中管理，这种情况下通常会有一个日志服务器，然后每个机器配置自己日志通过rsyslog来写到远程的日志服务器上。这里假定有两台服务器，一台作为系统日志的服务器（比如机器名logmaster），另一台作为日志的客户端（比如机器名logclient）日志服务器配置首先修改log master机器上的/etc/rsyslog.conf文件，将其中下面四...
分类：
系统相关 时间：
2015-06-28 15:37:33
阅读次数：
196
配置OSSECSYSLOG输出（所有agent）编辑ossec.conf文件（默认为/var/ossec/etc/ossec.conf）在ossec.conf中添加下列内容（10.0.0.1为接收syslog的服务器）<syslog_output>
<server>10.0.0.1</server>
<port>9000</port>
<format>default<..
分类：
其他好文 时间：
2015-06-26 13:10:13
阅读次数：
300
背景介绍：默认下的Haproxy配置是不会生成日志文件的，而无运行日志，无法确定系统运行是否流畅，无法提起预判可能发生的故障创建Haproxy日志文件的步骤如下vi /etc/rsyslog.conf取消以下2行的注释：$ModLoad imudp$UDPServerRun 514并添加如下一行配置...
分类：
其他好文 时间：
2015-06-25 22:41:28
阅读次数：
396
之前我是在bashrc中添加了一句，让系统操作日志时向rsyslog发送一份内容，现在只要在发送的时候，自己再获取下当前的远程登录IP加进去就可以，像这样/etc/bashrc1 sshClientIP=`w | tail -n +3 | awk 'BEGIN {ip="local"}{if ($5...
分类：
系统相关 时间：
2015-06-25 19:15:26
阅读次数：
224
使用logstash的时候，为了更细致的切割日志，会写一些正则表达式。 使用方法 input { file { type => "billin" path => "/data/logs/product/resul...
分类：
其他好文 时间：
2015-06-24 23:53:26
阅读次数：
6122
所谓日志审计，就是记录所有系统及相关用户行为的信息，并且可以自动分析、处理、展示（包括文本或者录像）推荐方法：sudo配合syslog服务，进行日志审计（信息较少，效果不错）1.安装sudo命令、syslog服务（centos6.4或以上为rsyslog服务）[root@nginx_back~]#rpm-qa"sudo|sysl..
分类：
系统相关 时间：
2015-06-24 07:07:28
阅读次数：
187
上一篇博文我们解析了rsyslog的基础知识与配置，下面我们紧接上篇博文继续完善，最终利用Rsyslog+LogAnalyzer+MySQL部署日志服务器，实现日志信息的webGUI展示。【实验环境与拓扑】系统：CentOS6.5Rsyslog:rsyslogd5.8.10Loganalyzer:loganalyzer-3.6.5LAMP:httpd-2.4.4，mysql..
分类：
系统相关 时间：
2015-06-23 06:26:29
阅读次数：
655
最近搞了一个logstash kafka elasticsearch kibana 整合部署的日志收集系统。部署参考lagstash + elasticsearch + kibana 3 + kafka 日志管理系统部署 02 上线过程中有一些环节，觉得还是值的大家注意的比如：1，应用运维和研发人员...
分类：
其他好文 时间：
2015-06-19 22:58:06
阅读次数：
224
【前言】日志记录了系统每天发生的各种各样的事情，同时还可以监视系统中发生的事件，你可以通过他来检查错误发生的原因，或者寻找受到攻击时攻击者留下的痕迹，对运维管理人员来说日志就是他的第三只眼，对于预警、发现、解决系统问题都非常有帮助。下面我们就一同来了解Linux..
分类：
系统相关 时间：
2015-06-19 13:41:46
阅读次数：
658
