这里用到的nginx日志是网站的访问日志,比如: [java] view plain copy 180.173.250.74 - - [08/Jan/2015:12:38:08 +0800] "GET /avatar/xxx.png HTTP/1.1" 200 968 "http://www.ite
分类:
其他好文 时间:
2016-01-31 21:26:40
阅读次数:
335
一、架构说明当客户端访问Web服务器时,Web服务器根据客户端访问的资源进行判断,如果是静态的页面Web服务器就直接返回给给客户端,如果是动态的页面,Web服务器就请求PHP服务器进行解析,在解析过程有需要MySQL数据的PHP服务器就请求MySQL服务器,PHP服务器解析完后封装发送给..
分类:
其他好文 时间:
2016-01-28 19:27:07
阅读次数:
408
日志切割 当我们每访问一次网站时,会有若干条日志,即访问日志。前提是之前已经配置了日志工能。但当一个网站的访问量巨大时,记录的日志也是巨量的。这样即不利于日志的查看也会对服务硬盘资源造成浪费。 要解决这种情况就需要对日志做切割,即将日志按照需求进行归档 以天为单位对访问日志进行归档,配置如下: Do...
分类:
其他好文 时间:
2016-01-17 18:48:45
阅读次数:
197
通过对Nginx访问日志进行分析即可。#!/bin/bash
functiondefine()
{
ori_log_path="/var/log/nginx/abc.access.log"
tmp_log_path="/var/log/nginx/5min_abc.access.log"
date_stamp=`date-d"-5min"+%Y:%H:%M:%S`
day_stamp=`date+%d`
}
functiongather()
{
awk-F‘[/"\[]‘-vn..
分类:
其他好文 时间:
2016-01-07 01:31:16
阅读次数:
276
有时候去分析访问日志的时候会有很多非法的访问,或者说你不想让它访问的一些请求,比如说一些比较垃圾的蜘蛛搜索引擎,其实我们对于这些搜索引擎是可以禁掉的,因为你的网站访问量的请求如果很大的话,那么会有一半的访问量是这些搜索引擎他们的爬虫来访问的,它们的访问跟人..
分类:
Web程序 时间:
2016-01-04 07:47:16
阅读次数:
535
root@zhangmengjunlinux~]#vim/usr/local/apache2/conf/extra/httpd-vhosts.confcommon代表访问日志的类型名字,我们看一配置文件,在主配置文件我们能看到日志的格式,名字查找/common最好用combined格式,我们也可以自定义一个,就像是LogFormat"%h%l%u%t\"%r\"%>s%b\"%{R..
分类:
Web程序 时间:
2016-01-01 15:07:24
阅读次数:
270
Kafka是什么Kafka是最初由Linkedin公司开发,是一个分布式、分区的、多副本的、多订阅者,基于zookeeper协调的分布式日志系统(也可以当做MQ系统),常见可以用于web/nginx日志、访问日志,消息服务等等,Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目...
分类:
其他好文 时间:
2015-12-28 00:52:07
阅读次数:
219
一、例题 某公司里有一台web服务器,里面的数据很重要,但是如果硬盘坏了,数据就会丢失,现在领导要求你把数据备份,这样web服务器数据丢失可以进行恢复。 要求如下: 每天晚上00点整在web服务器A上打包备份系统配置文件、网站程序目录及访问日志,并通过rsync命令推送到服务器B上备份保留(备...
分类:
其他好文 时间:
2015-12-27 10:52:25
阅读次数:
236
AWStats是使用Perl语言开发的一款开放性日志分析系统,可分析Apache网站服务器的访问日志,还可以用来分析Samba、Vsftpd、IIS等日志信息。此文章主要讲解如何在linux系统下安装部署关于对Apache网站服务站日志分析的AWStats。实验步骤一,安装部署AWStats分析软件。一,安装AWS..
分类:
系统相关 时间:
2015-12-26 23:39:57
阅读次数:
312
在统计访问日志参数的时候IP是一个重要的参数,所有索取客户端的IP就至关重要。 在log_format配置中有两个变量是获取IP地址的: remote_addr:客户端IP x_forwarded_for:客户端的IP 从上面来看两个都是客户端IP,那这两个变量有什么不同? 首先当你访问某个网站,....
分类:
Web程序 时间:
2015-12-21 01:55:28
阅读次数:
324