ODPS功能介绍之数据导入 在使用ODPS强大的数据处理能力之前，大家最关心的是自己的数据如何导入到ODPS中。下面介绍一款向ODPS导入数据的工具-Fluentd。 Fluentd是一个开源的软件，用来收集各种源头日志（包括Application Log、Sys Log及Access Log）.....
分类：
其他好文 时间：
2015-11-19 20:32:49
阅读次数：
269
关闭tomcat的access_log搭建TOMCAT服务器后，运行一段时间就会产生大量的日志，导致磁盘空间不足，在查找分析时发现“localhost_access_log”日志占用大量的空间，查看该日志的内容发现该日志记录的是客户端的访问信息，包括客户端IP，时间，访问的资源等信息。10.11.2.310.11...
分类：
数据库 时间：
2015-11-17 19:10:23
阅读次数：
157
SetEnvIfNoCase Referer "^http://www.example.com/" local_referrer=1 CustomLog logs/access_log combined env=!local_referrer
分类：
Web程序 时间：
2015-11-09 22:16:41
阅读次数：
125
转载：http://www.nginx.cn/1134.htmlserver{ listen 80; server_name www.ci.oa.com; access_log /usr/local/services/nginx/logs/www.ci.oa...
分类：
其他好文 时间：
2015-11-06 16:13:18
阅读次数：
311
#!/bin/shzcatwww_access_log.2013-12-31.gz|awk-F"\""‘BEGIN{OFS="@"#输出字段之间的分隔符，用别的也可以}{ip=""ips=""logtime=""if(match($1,/([^-]+[0-9]|-)[^]+([^]+)?\[[^:]+:([^]+)/,f)){ip=f[1]logtime="2013-12-30"f[3]}ip=ip=="-"?"":ipif(length(ip)>15){#ips=ip..
分类：
Web程序 时间：
2015-11-05 00:54:43
阅读次数：
265
一、简介 logresolve是一个解析Apache访问日志中IP地址的后处理程序。 二、语法 logresolve [ -s filename ] [ -c ] access_log.new 三、实例 1）记录主机名而非IP地址 CustomLog "| bin/logresolve -c >> ...
分类：
Web程序 时间：
2015-10-28 22:55:10
阅读次数：
165
一、创建日志切割脚本nginx-log#!/bin/bash##零点执行该脚本##nginx日志文件所在的目录LOGS_PATH=/var/log/nginx/##获取昨天的yyyy-MM-ddYESTERDAY=$(date-d"yesterday"+%Y-%m-%d)##重命名日志文件mv${LOGS_PATH}/access.log${LOGS_PATH}/access_${YESTERDAY}.logmv${LOGS_PATH..
分类：
系统相关 时间：
2015-10-24 19:02:38
阅读次数：
263
server { listen 80; server_name 127.0.0.1;#charset koi8-r;#access_log logs/host.access.log main;location /{ proxy_pass http://paila; proxy_redirect of...
分类：
其他好文 时间：
2015-10-12 10:35:51
阅读次数：
158
一、日志分割的要求由于Tengine的日志都是写在一个文件当中的，因此，我们需要每天零点将前一天的日志存为另外一个文件，这里我们就将Tengine位于logs目录中的access.log存为access_[yyyy-MM-dd].log的文件。其实logs目录中还有个error.log的错误日志文件，这个文件也需要每天..
分类：
其他好文 时间：
2015-10-05 07:06:39
阅读次数：
158
shell判断文件是否存在1. shell判断文件,目录是否存在或者具有权限2. #!/bin/sh3.4. myPath="/var/log/httpd/"5. myFile="/var /log/httpd/access.log"6.7. # 这里的-x 参数判断$myPath是否存在并且是否具...
分类：
系统相关 时间：
2015-09-26 23:56:23
阅读次数：
263
