ELK日志分析平台搭建 ELASTICSEARCH 介绍:ELK由ElasticSearch、Logstash和Kiabana三个开源工具组成 1、Elasticsearch是一个开源分布式的搜索引擎,特点是:分布式、零配置、自动发现、索引自动分片、索引副本机制、restful风格接口,多数据源,自 ...
分类:
其他好文 时间:
2018-03-02 01:24:10
阅读次数:
339
ELK搭建实时日志分析平台之二Logstash和Kibana搭建 ...
分类:
其他好文 时间:
2018-02-28 14:13:46
阅读次数:
2387
1、问题: 公司采用了自动发布平台,最近突然发现一个问题,上线完成后服务是能正常访问的,但是有一个节点访问的时候每两次中总是有一次404,通过nginx的access日志分析发现第一次正常访问有一次get请求202,接下来访问第二次或出现一次get404,post202,get404,返回三个请求? ...
分类:
其他好文 时间:
2018-02-27 17:42:04
阅读次数:
142
一、为什么要用MapReduce? 首先MapReduce被广泛应用于日志分析、海量数据的排序、在海量数据中查找特定模式等 场景。而且它非常简单,易于实现且扩展性强。可以通过它编写同事在多台主机上运行的程序,可以使用Python/PHP/C++等非java类语言编写map或reduce程序。还可以在 ...
分类:
其他好文 时间:
2018-02-22 11:38:49
阅读次数:
205
高性能web从下到上捋一捋 从上到下部署工具| | 装机 |cobbler 虚拟化 |kvm/openstack 自动部署服务 |ansible/salt 监控工具 |zabbix 部署工具 |jenkins 日志分析 |ELK 缓存 "缓存参考" buffer 缓冲 写操作 写缓冲 cache 缓 ...
分类:
Web程序 时间:
2018-02-22 10:47:48
阅读次数:
167
随笔 - 66 文章 - 0 评论 - 19 MySQL慢查询(二) - pt-query-digest详解慢查询日志 一、简介 pt-query-digest是用于分析mysql慢查询的一个工具,它可以分析binlog、General log、slowlog,也可以通过SHOWPROCESSLIS... ...
分类:
数据库 时间:
2018-02-18 14:45:33
阅读次数:
193
MySQL中的日志包括:错误日志、二进制日志、通用查询日志、慢查询日志等等。这里主要介绍下比较常用的两个功能:通用查询日志和慢查询日志。1)通用查询日志:记录建立的客户端连接和执行的语句。2)慢查询日志:记录所有执行时间超过long_query_time秒的所有查询或者不使用索引的查询(1)通用查询日志在学习通用日志查询时,需要知道两个数据库中的常用命令:1)showvariableslike
分类:
数据库 时间:
2018-02-07 15:00:09
阅读次数:
191
步骤:1查看及分析/var/log/messsages日志文件2查看及分析用户登录日志Last:命令用于查询成功登录到系统的用户记录Lastb命令用于查询登录失败的用户记录MBR扇区故障1.备份MBR扇区数据将第一块硬盘(sda)的MBR扇区备份到第2快硬盘的sdb 1分区中(挂载道/opt/目录下)【故障模拟】从设备文件zerozhoong读取512字节的数据,将其覆盖到第1快硬盘(sda,)
分类:
系统相关 时间:
2018-02-07 14:37:56
阅读次数:
210