在介绍python在数据库中的操作之前先简单介绍点mysql中的操作语言: [root@elk-server 2018-01-24]# mysql -u root -p Enter password: Welcome to the MySQL monitor. Commands end with ; ...
分类:
数据库 时间:
2018-01-27 00:34:35
阅读次数:
234
=================正则匹配 [root@web02 conf.d]# cat apache-grok.conf input{ file { path => "/var/log/httpd/access_log" type => "apache_access.log" start_po... ...
分类:
其他好文 时间:
2018-01-26 22:42:19
阅读次数:
138
ELK组件可以去官网下载,这里我使用的版本是: elasticsearch-5.6.4 因为这里是快速部署,并且我把ELK都部署在同一台机器(CentOS 7.2),ip地址是:192.168.88.3,因此这里没有考虑到其他的优化,部署前请确保已经安装Java环境即JDK 修改系统环境配置满足运行 ...
分类:
其他好文 时间:
2018-01-26 12:43:44
阅读次数:
144
**ELK帮助我们解决了什么?!**
不使用日志系统需待解决的痛点:
大量不同种类的日志成为了运维人员的负担,不方便管理;
单个日志文件巨大,无法使用常用的文本工具分析,检索困难;
日志分布在多台不同的服务器上,业务一旦出现故障,需要一台台查看日志。
线上日志出现报错无法第一时间知悉并处理。
必须给核心开发人员开通线上服务器账号,对生产环境风险上升。
运维对线上环境不可控。
不能满足信息安全等级保护三级对日志存储的要求。
不能满足日志可视化和大数据量分析要求。
分类:
其他好文 时间:
2018-01-26 10:52:58
阅读次数:
212
./filebeat 使用-c命令行上的标志设置要加载的配置文件,可以通过重复-c标志来指定多个配置文件, 可以使用覆盖个别设置-E <setting>=<value>。<value>可以是单个值, 也可以是复杂对象,如列表或字典。 例如: -E output ='{elasticsearch.en ...
分类:
其他好文 时间:
2018-01-19 15:49:16
阅读次数:
359
Filebeat提供了几种不同的方式来启用模块: 在modules.d编辑目录中启用模块配置 运行Filebeat 编辑时启用模块 在filebeat.yml文件编辑中启用模块配置 例如,要在 目录中启用apache2和mysql配置modules.d,请使用: 然后,当您运行Filebeat时,会 ...
分类:
其他好文 时间:
2018-01-19 15:40:37
阅读次数:
442
为了解决公司的项目在集群环境下查找日志不便的问题,我在做过简单调研后,选用Elastic公司的Elastic Stack产品作为我们的日志收集,存储,分析工具。 Elastic Stack是ELK(Elasticsearch,Logstash,Kibana)从5版本开始的新名称,那么的他们都能干什么 ...
分类:
其他好文 时间:
2018-01-19 00:16:05
阅读次数:
623
---## 介绍[ElasticSearch](https://www.elastic.co/cn/)是一款搜索引擎中间件,因其强大的全文索引、查询统计能力和非常方便的全套基于Restful的接口,以及在自动分片、无停机升级扩容、故障转移等运维方面的高效性,逐渐成为中小型甚至非专门处理搜索业务的大型... ...
分类:
其他好文 时间:
2018-01-18 23:13:08
阅读次数:
388
1.启动elasticsearch docker run -d --name myes -p 9200:9200 elasticsearch:2.3 2.启动kibana docker run --name mykibana -e ELASTICSEARCH_URL=http://118.184.6 ...
分类:
编程语言 时间:
2018-01-17 15:49:45
阅读次数:
193