需求：统计每分钟有多少行；及23:59有多少行，00:00有多少行，文件过大每个文件2G，共5个文件 文件：access_log.2017-11-06-00_00_00文件内容如下： Python代码如下所示： 又用Shell编了一个简单Shell脚本，脚本如下： 两个脚本的效率差别很大。。。哪位大 ...
分类：
编程语言 时间：
2017-11-10 15:14:01
阅读次数：
190
方法/步骤 1 删除文件夹实例：rm -rf /var/log/httpd/access将会删除/var/log/httpd/access目录以及其下所有文件、文件夹 2 删除文件使用实例：rm -f /var/log/httpd/access.log将会强制删除/var/log/httpd/acc ...
分类：
其他好文 时间：
2017-11-10 10:58:45
阅读次数：
141
以下脚本都是基于上面日志格式的，如果你的日志格式不同需要调整awk后面的参数。 分析日志中的UserAgent cat access_20130704.log | awk -F "\"" '{print $(NF-3)}' | sort | uniq -c | sort -nr | head -20 ...
分类：
系统相关 时间：
2017-11-07 14:23:08
阅读次数：
292
配置nginx在location节点下面加入如下代码proxy_set_headerHost$host;
proxy_set_headerX-Real-IP$remote_addr;
proxy_set_headerREMOTE-HOST$remote_addr;
proxy_set_headerX-Forwarded-For$proxy_add_x_forwarded_for;修改tomcat的server.xml配置文件找到如下配置<Valvecl..
分类：
数据库 时间：
2017-11-06 23:03:38
阅读次数：
211
tomcat日志tomcat日志配置在server.xml里的<host>标签下加上<ValveclassName="org.apache.catalina.valves.AccessLogValve"directory="logs"prefix="localhost_access_log."suffix=".txt"pattern="common"resolveHosts="false"/>就可以了，下面咱们逐一分析各个参..
分类：
其他好文 时间：
2017-11-06 22:51:21
阅读次数：
258
upstream java_api { server 127.0.0.1:8080; } server { listen 80; server_name www.heboan.com; access_log /var/log/nginx/log/www_heboan_com.access.log r... ...
分类：
其他好文 时间：
2017-11-06 11:18:32
阅读次数：
186
nginx日志切割脚本#!/bin/bash
#这个脚本是用来切割nginx日志根据自己情况进行必要的切割：
set-e
logs_path="/data/wwwlogs/"
oldlogs_path="/data/wwwlogs/ngx_oldlogs/"
hos="ngx128"
old_nginx=`mv${logs_path}access.log${logs_path}access_$(date-d"yesterday"+"%Y%m%d")..
分类：
其他好文 时间：
2017-11-04 00:27:59
阅读次数：
245
https://flume.apache.org/FlumeUserGuide.html 【测试模拟】 a1.sources.r1.type = exec a1.sources.r1.command = tail -F /opt/data/access.log 【生产】 ...
分类：
其他好文 时间：
2017-10-26 19:52:08
阅读次数：
120
Nginx查看并发连接通过界面查看通过界面查看通过web界面查看时Nginx需要开启status模块,也就是安装Nginx时加上--with-http_stub_status_module然后配置Nginx.conf,在server里面加入如下内容:1234567location/Nginxstatus{stub_statuson;access_log/usr/local/nginx/logs/status..
分类：
其他好文 时间：
2017-10-21 00:13:59
阅读次数：
270
VM_60_153_sles10_64:~ # cat /data/scripts/cut_nginx_log.sh #!/bin/bash date=`date +%Y%m%d` /bin/mv /data/nginx_logs/access.log /data/nginx_logs/${date... ...
分类：
其他好文 时间：
2017-10-20 10:24:46
阅读次数：
122
