本题其实就是storm的wordcout,需要把一个gz压缩的文件读取，并使用storm计算其pv. 样本 数据： 存储为accesslog.gz 我把它加载到我的虚拟机中/mnt/下。 没有使用trident，刚学习最基本的。 所以把spout的数目设定为1. 把文件路径存储在config 的ma...
分类：
其他好文 时间：
2015-02-07 14:25:20
阅读次数：
258
下面的方法是利用管道文件，使得nginx来支持cronlog分割日志实现方法1，建立管道文件mkfifo/var/log/accesslog/nginx/access.log2，修改nginx的log日志指向access_log/var/log/accesslog/nginx/access.log;...
分类：
其他好文 时间：
2014-10-11 23:19:46
阅读次数：
232
jouny在根据nginx的accesslog中$request_time进行程序优化时，发现有个接口，直接返回数据，平均的$request_time也比较大。原来$request_time包含了用户数据接收时间，而真正程序的响应时间应该用$upstream_response_time。下面介绍下2...
分类：
其他好文 时间：
2014-10-11 21:05:16
阅读次数：
195
今天重新调整了下配置文件，之前的apache_errorlog未匹配到clientip。1.首先修改shipper.confinput{
file{
type=>"apache-accesslog"
path=>"/var/log/httpd/access_log"
}
file{
type=>"apache-errorlog"
path=>"/var/log/httpd/error_log"
}
}
filter{
if[type..
分类：
其他好文 时间：
2014-09-12 17:24:04
阅读次数：
786
