Apache日志统计举例
加些来了解一下如何统计Apache的访问日志，一般可以用tail命令来实时查看日志文件变化，但是各种的应用系统中的日志会非常复杂，一堆长度超过你浏览极限的日志出现在你眼前时，你会觉得非常无奈，怎么办呢？这时可以用grep、sed、awk和sort等筛选工具帮助你解决这个问题。下面总结了几个常见分析方法。
（1）查看IP（$1代表IP）
#cataccess_lo...
分类：
Web程序 时间：
2015-01-03 22:29:07
阅读次数：
268
Tomcat 日志信息分为两类：1、运行中的日志，它主要记录运行的一些信息，尤其是一些异常错误日志信息。2、访问日志信息，它记录的访问的时间、IP、访问的资料等相关信息。关于tomcat访问日志的产生样式说明如下(从官方文档中摘录)：%a - Remote IP address%A - Local ...
分类：
其他好文 时间：
2014-12-31 12:54:11
阅读次数：
120
nginx有一个非常灵活的日志记录模式。每个级别的配置可以有各自独立的访问日志。日志格式通过log_format命令来定义。ngx_http_log_module是用来定义请求日志格式的。一.日志记录配置详解1.access_log指令语法:access_logpath[format[buffer=size[flush=time]]];
access_logpath..
分类：
其他好文 时间：
2014-12-28 01:56:03
阅读次数：
372
这几天游戏上线在查看Nginx的访问日志时，发现有很多HTTP返回码为400的记录。
以下是Nginx的访问日志：
222.89.55.137--[27/Dec/2014:19:35:15+0800]"POST/dia.phpHTTP/1.1"400172"-""-""-"
网站查了很多文档关于400问题的解决方法：
1.修改nginx配置文件
client_header_buf..
分类：
其他好文 时间：
2014-12-28 01:55:10
阅读次数：
392
来自：http://blog.chinaunix.net/uid-20691565-id-3938220.htmlTomcat的访问日志是靠org.apache.catalina.valves.AccessLogValve来控制的，你可以修改$tomcat/conf/server.xml来启用它($...
分类：
其他好文 时间：
2014-12-24 13:09:41
阅读次数：
158
最近买了一本《Python宝典》在看，此书所讲Python知识的广度明显，但是深度略显不足，所以比较适合入门及提高级的读者来看。其中对于Python大数据处理一章的内容比较有兴趣，看明白了以后，我根据书上提供的案例对源代码进行了修改，也实现了模拟MapReduce的过程。
目标：从Apache的用户访问日志access.log中统计出页面资源的访问量。我们假设这个文件体积十分巨大。
acc...
分类：
编程语言 时间：
2014-12-19 12:13:28
阅读次数：
235
一.apache日志类型1.apache日志共分为：访问日志，错误日志2.日志信息的级别严重程度等级说明1emerg系统不可用2alert需要立即引起注意的情况3crit危急情况4error错误信息5warn警告信息6notice需要引起注意的情况7info一般信息8debug由运行于debug模式的程序输出的信息说明：如..
分类：
Web程序 时间：
2014-12-18 19:04:52
阅读次数：
270
catbbs.access.2014-05-01.log|awk‘{print$1}‘|sort-n|uniq-c|sort-n|tac|head-n10catbbs.access.2014-05-01.log|awk‘{print$1}‘|sort-n|uniq-c|sort-n|tail-n10catbbs.access.2014-05-01.log|awk‘{print$9}‘|sort-n|uniq-c[root@mode~]#awk‘{print$1}‘access_2010-12-8.log|so..
分类：
其他好文 时间：
2014-12-16 19:29:11
阅读次数：
181
2014年12月13，接到用户的投诉说电子商场第一次登录，需要修改密码才能登录。一听到这个脑大了，该从哪里排查呢：1、肯定是查看网站访问日志，access.log没发现有问题。2、用户登录不了，那肯定是login站点，查看这个站点的日志发现大部分信息都是线上连接数据库失败。(说明：..
分类：
数据库 时间：
2014-12-15 06:46:46
阅读次数：
223
Learning storm book 笔记8
有代码的书籍看起来就是爽，看完顺便跑个demo,感觉很爽！
场景分析
主要是利用apache的访问日志来进行分析统计 如用户的IP来源，来自哪个国家或地区，用户使用的Os，浏览器等信息，以及像搜索的热词等信息的统计 这里日志信息如下
24.25.135.19 - - [1-01-2011:06:20:31 -0500] "GET...
分类：
其他好文 时间：
2014-12-11 06:48:19
阅读次数：
261
