#!/bin/shif[!-d/home/passport_log_tmp]&&[!-d/usr/local/nginx/html/awstats/passport.xxx.com];thenmkdir-p/usr/local/nginx/html/awstats/passport.xxx.commkdir-p/home/passport_log_tmpfirm-rf/home/passport_log_tmp/access_*.logfind/home/passport_log/web[1-..
分类：
其他好文 时间：
2015-05-07 16:58:36
阅读次数：
204
1，http日志分析#!/bin/bash
foriin$@;do
echo====================="$i"=============================>>weblog.txt
echo"IPdata">>weblog.txt
awk‘{print$1}‘$i|wc-l>>weblog.txt
awk‘{print$1}‘$i|sort|uniq-c|wc-l>>weblog.txt
echo"sokectdata"&g..
分类：
Web程序 时间：
2015-05-07 12:39:34
阅读次数：
156
分析例如以下GC日志: [GC [PSYoungGen: 9216K->1024K(9216K)] 1246196K->1246220K(1287040K), 0.2398360 secs] [Times: user=0.29 sys=0.01, real=0.24 secs] [...
分类：
编程语言 时间：
2015-05-07 11:47:37
阅读次数：
128
标题是不是可以翻译成这样：logstashFiltersnginxaccesslog好了，进入正题，日志管理服务器我用ElasticSearch+LogStash+Kibana+Redis先说下我的架构：远程NGINX采集日志数据到REDIS+logstash+elasticsearch+kibana服务器至于怎么部署，因本人之前用baidu博客写在那上面了，以后..
分类：
其他好文 时间：
2015-05-07 01:08:56
阅读次数：
187
参照http://nkcoder.github.io/blog/20141031/elkr-log-platform-deploy/此作者搭建环境过程。借一张图：搭建版本为：Elasticsearch：1.5.2Logstash：1.4.2Kibana：4.0.2Shipper节点配置如下：inpu...
分类：
其他好文 时间：
2015-05-05 01:19:18
阅读次数：
133
grok-patterns内置了很多基础变量的正则表达式的log解析规则，其中包括apache的log解析（同样可以用于nginx的log解析）。基于nginx日志分析配置：1.配置nginx日志格式如下：log_format main '$remote_addr [$time_local]'' "...
分类：
其他好文 时间：
2015-05-04 17:51:28
阅读次数：
190
我的新书《UNIX/Linux网络日志分析与流量监控》,在全国图书订货会-机械工业出版社展台《UNIX/Linux网络日志分析与流量监控》
分类：
其他好文 时间：
2015-04-30 20:28:01
阅读次数：
126
1.ElasticSearch使用需要先进入安装目录中的bin目录运行elasticsearch.bat。想确认程序是否运行，则运行lsof -i:9200lsof -i:9300一个是节点对外服务端口，一个是节点间交互端口（如果有集群的话）。2.建立集群配置文件路径是：.....（你的实际路径)/...
分类：
其他好文 时间：
2015-04-30 19:41:24
阅读次数：
197
介绍ElasticSearch是一个开源的分布式搜索引擎，具备高可靠性，支持非常多的企业级搜索用例。像Solr4一样，是基于Lucene构建的。支持时间时间索引和全文检索。官网：http://www.elasticsearch.org它对外提供一系列基于java和http的api，用于索引、检索、修...
分类：
其他好文 时间：
2015-04-30 17:50:09
阅读次数：
154
http://bughd.com/doc/indexBugHD 用户使用手册一.登录/注册如果你已经有 FIR.im 的账号，可以使用 FIR.im 的账号直接登录二.创建一个项目在项目列表，点击“创建项目”输入项目名称，选项项目的应用类型获取到 general_key,用于配置 SDK。三.集成S...
分类：
其他好文 时间：
2015-04-30 17:31:30
阅读次数：
179
