1.取访问前10的ip地址cataccess.log|awk‘{print$1}’|sort|uniq-c|sort-nr|head-10cataccess.log|awk‘{counts[$(11)]+=1};END{for(urlincounts)printcounts[url],url}’2.访问次数最多的文件或页面,比如获取前10cataccess.log|awk‘{print$11}’|sort|uniq-c|sort-nr|head-10..
分类：
Web程序 时间：
2015-09-05 23:55:14
阅读次数：
326
本文描述了一个简单的case，讲解怎么在logstash进行配置，将多个日志数据流，通过redis缓存接收，再导出到elasticsearch多个索引，即一类日志数据对应一类索引。 假设有两组日志数据由日志端写入redis缓存，两组日...
分类：
其他好文 时间：
2015-09-05 20:54:54
阅读次数：
307
1、介绍GoAccess 是一个用来统计 Apache Web 服务器的访问日志的工具，可即时生成统计报表，速度非常快查看的统计信息有：统计概况，流量消耗等访客排名动态Web请求静态web请求，如图片、样式表、脚本等。来路域名404 错误操作系统浏览器和搜索引擎主机、DNS和IP地址HTTP 响应代...
分类：
数据库 时间：
2015-09-04 07:16:10
阅读次数：
361
linux系统web日志分析这方面工具比较多，比如logwatch或awstats等使用perl语言开发，功能都非常强大。但这些软件都需要进行一些配置，很多朋友往往在技术方面没有投入太多力量，即便参照互联网上图文教程也无从下手。对于此情况我编写了一个web日志分析脚本，功能比较简单，无需配置，有需要...
分类：
Web程序 时间：
2015-09-03 23:27:51
阅读次数：
548
手动安装Ossim很多关注《UNIX/Linux网络日志分析与流量监控》一书的朋友都被里面丰富的日志分析案例所吸引，尤其是最后精彩的OSSIM应用案例分析更加引人入胜，很多朋友都在自己的企业网中部署了OSSIM，也有一部分用户希望对OSSIM进行一些二次开发，不想总是依赖ISO镜像方式安装..
分类：
其他好文 时间：
2015-09-03 14:08:41
阅读次数：
1229
日志分析软件 seci-log 1.12发布，增加了增加了http 旁路抓包审计。上篇文章http://www.oschina.net/news/64725/seci-log-1-11，有兴趣可以了解一下。增加内容如下： seci-log主要的功能是做日志分析，但有时候也...
分类：
Web程序 时间：
2015-09-01 15:24:23
阅读次数：
244
一、集群健康API查看集群状态信息：curl
http://localhost:9200/_cluster/health;echo查看集群节点信息：curlhttp://localhost:9200/_nodes/stats/host?pretty
分类：
其他好文 时间：
2015-09-01 00:12:37
阅读次数：
174
相信大家都知道网站日志是什么东西，可是做SEO的有多少人会去关注分析网站日志呢，又有多少SEOer能看懂网站日志呢？今天就给大家讲解下在网站SEO优化中，怎样利用网站日志的诊断和分析来提高网站关键词的排名。首先我们仙说下网站日志分析的作用，对于一个刚上线的网站，我们能分析出来搜索引擎蜘蛛抓取的情况；...
分类：
Web程序 时间：
2015-08-29 20:04:56
阅读次数：
193
在开始之前，推荐大家去看看Eclipse shortcuts这篇文章，它将会给你带来很多方便。在本文中使用的是Eclipse Juno版（Eclipse 4.2），在开始前给大家提3点建议！不要使用System.out.println作为调试工具 把所有涉及到的组件日志级别激活并使用 使用日志分析器来读取日志 1.条件断点如果你不知道如何添加断点，只需点击左边面板（行号前面）断点即被创建。在调试界...
分类：
编程语言 时间：
2015-08-28 21:38:49
阅读次数：
180
1. 取得某个索引中某个字段中的所有出现过的值这种操作类似于使用SQL的SELECT UNIQUE语句。当需要获取某个字段上的所有可用值时，可以使用terms聚合查询完成：GET /index_streets/_search?search_type=count
{
"aggs": {
"uniq_streets": {
"terms": {
"field": "nam...
分类：
其他好文 时间：
2015-08-28 00:49:44
阅读次数：
547
