什么是ELK? ELK指的是ElasticSearch,Logstash,Kibana这三个工具的首字母缩写,中文指南很详细,按其步骤来,入门基本没啥问题。 解决什么问题? 公司产品EDI平台的主要任务就是将各个数据源的文件信息处理后再发送第三方,没有实时监控,文件发送不成功时,运维相当被动。 EL ...
分类:
其他好文 时间:
2017-04-03 01:16:22
阅读次数:
258
本文主要为自己所走弯路而做的补充,对小白(比如我)来讲某些博客讲的还是高深了,特地来此补充说明一些东西。 主要步骤参考http://blog.csdn.net/ywheel1989/article/details/60519151 主要问题 1、对我这样什么准备都没的小白来讲,第一步brew命令就是 ...
分类:
系统相关 时间:
2017-04-02 16:18:12
阅读次数:
293
elasticsearch更改mapping(不停服务重建索引)原文 http://donlianli.iteye.com/blog/1924721Elasticsearch的mapping一旦创建,只能增加字段,而不能修改已经mapping的字段。但现实往往并非如此啊,有时增加一个字段,就好像打了 ...
分类:
移动开发 时间:
2017-04-01 12:35:14
阅读次数:
373
和一般查询比较,filter查询能够缓存数据,应该尽可能使用 建立测试数据 查看测试数据 1、filtered查询 GET /store/products/_search { "query":{ "filtered":{ "query": { "match_all":{} }, filter:{ " ...
分类:
其他好文 时间:
2017-03-31 17:01:33
阅读次数:
127
elasticsearch提供了快照功能:1、在elsticsearch的配置文件中定义一个path.repo路径配置path.repo:["/elk/my_backup"]重新启动elasticsearch服务创建备份的文件夹并赋予权限mkdir-p/elk/my_backupchmod755/elk/my_backupchown-Relasticsearch.elasticsearch/elk/*创建reposito..
分类:
其他好文 时间:
2017-03-31 13:47:20
阅读次数:
207
elk系统全部采用5.0版本1、elk是依赖于java环境,所以要先安装jdk,主意elk5.0版本所需要的jdk必须在1.8以上2、安装elasticsearchyum-yinstallelasticsearch-5.0.1.rpmmkdir-pv/elk/{data,logs}//创建es存储的数据和日志文件chown-Relasticsearch.elasticsearch/elk/*//修改属..
分类:
其他好文 时间:
2017-03-30 19:58:31
阅读次数:
393
问题描述: 这是一个i/o time 的问题,一般考虑就是磁盘满的问题。以下是我遇到的具体问题: 1、Kibana页面刷新,没有新数据出来,再次刷新或者点击页面上其他地方,kibana就变成这样了: 这让我就猜测存储空间满了。 2、看filebeat的log ,发现全是 read tcp 192.1 ...
分类:
其他好文 时间:
2017-03-30 18:50:27
阅读次数:
850
参考:http://www.tuicool.com/articles/R77fieA 我在做ELK日志平台开始之初选择为ELK+Redis直接构建,在采集nginx日志时一切正常,当我采集我司业务报文日志类后,logstash会报大量的redis connect timeout。换成redis cl ...
分类:
其他好文 时间:
2017-03-30 16:16:53
阅读次数:
460
结合Docker快速搭建ELK日志收集分析平台2017-03-2709:39阅读172评论0作者:马哥Linux运维-EasonELKStackELK(Elasticsearch+Logstash+Kibana),是一个开源的日志收集平台,用于收集各种客户端日志文件在同一个平台上面做数据分析。IntroductionElasticsearch,基于json分析搜索引..
分类:
其他好文 时间:
2017-03-29 19:43:25
阅读次数:
189