基于上一个安装部署的文档后（ELASTIC 5.2部署并收集nginx日志） http://www.cnblogs.com/kerwinC/p/6387073.html 本次带来一些使用的分享。 1、kibana基于geoip数据库绘制地图。 1、postman插件定制mapping并根据mappi ...
分类：
其他好文 时间：
2017-02-16 14:50:28
阅读次数：
295
错误场景： 架构nginx+tomct 通过nginx直接访问出现504 不通过ngin页面打不开 nginx日志报错 upstram timeout相关 分析： 后端服务出现问题。（有时间再把详细情况补充上） ...
分类：
Web程序 时间：
2017-02-12 22:31:29
阅读次数：
333
Nginx 日志对于大部分人来说是个未被发掘的宝藏，总结之前做某日志分析系统的经验，和大家分享一下 Nginx 日志的纯手工分析方式。 Nginx 日志相关配置有 2 个地方：access_log 和 log_format 。 默认的格式： 相信大部分用过 Nginx 的人对默认 Nginx 日志格 ...
分类：
其他好文 时间：
2017-01-22 13:33:11
阅读次数：
186
Linux下添加shell脚本使得nginx日志每天定时切割压缩一 简介 对于nginx的日志文件，特别是access日志，如果我们不做任何处理的话，最后这个文件将会变得非常庞大 这时，无论是出现异常时查日志，还是使用“GoAccess”等工具对日志进行分析都将会变得非常麻烦。因此，每天定时对ngi ...
分类：
系统相关 时间：
2017-01-22 09:39:51
阅读次数：
226
Linux nginx日志按天分割实例 nginx的日志有个小缺点，日志文件一直就是一个，不会自动地进行切割，如果访问量很大的话，将导致日志文件非常大，不便于管理这就需要我们自己来实现了，按日期每天生产一个日志文件思路 每天零点把默认日志文件改名为当天日期，再重新打开新的日志文件使用定时任务来执行脚 ...
分类：
系统相关 时间：
2017-01-08 03:32:13
阅读次数：
269
log_format logstash "remote_addr | $time_local | $request | $status | $body_bytes_sent | " "$request_body | $content_length | $http_referer | $http_us ...
分类：
其他好文 时间：
2017-01-05 13:26:57
阅读次数：
252
elk日志数据导出SkiptoendofmetadataGotostartofmetadataelk原始日志存放要求原始日志存放路径：/data/es/elasticsearch/nodes/0/indices原始日志名称格式：logstash-type-20xx.xx.xx（其中type为日志的类型，如nginx）日志数据导出的要求li‘y日志数据导出后存放路径：/data/el..
分类：
其他好文 时间：
2017-01-05 12:20:47
阅读次数：
196
通过编辑脚本的方式来实现日志每日以及每天的切割纪录。可以通过计划任务的方式实现每天执行脚本，具体情况需要更加实际情况 vim /root/cut_nginx_log.sh #!bin/sh Dateformat='date +%Y%m%d' Basedir="/application/nginx" ...
分类：
其他好文 时间：
2017-01-01 19:56:32
阅读次数：
158
一、概念并发连接数客户端向服务器发起请求，并建立了TCP连接。每秒钟服务器链接的总TCP数量，就是并发连接数。请求数请求数指的是客户端在建立完连接后，向http服务发出GET/POST/HEAD数据包。拓展：服务器返回了请求结果后有两种情况：http数据包头包含Close字样，关闭本次TCP..
分类：
其他好文 时间：
2016-12-28 02:50:31
阅读次数：
217
1. 获取ip awk ‘{print $1}’ /data/logs/access.log 2.得到独立ip数 awk ‘{print $1}’ /data/logs/access.log | sort | uniq | wc -l 3. 获取访问时间 grep -P ‘\[.*?]\’ -o / ...
分类：
其他好文 时间：
2016-12-25 20:50:25
阅读次数：
234
