可以使用命令直接定义input{udp{...type=>"foo"}file{...type=>"bar"}}output{if[type]=="foo"{elasticsearch{...index=>"foo-index"}}else{elasticsearch{...index=>"bar-index"}}}
分类:
其他好文 时间:
2018-03-26 10:46:21
阅读次数:
147
从零开始搭建系统2.2——ELK安装及配置 ...
分类:
其他好文 时间:
2018-03-24 14:31:58
阅读次数:
152
简介 在我们日常生活中,我们经常需要回顾以前发生的一些事情;或者,当出现了一些问题的时候,可以从某些地方去查找原因,寻找发生问题的痕迹。无可避免需要用到文字的、图像的等等不同形式的记录。用计算机的术语表达,就是 LOG,或日志。 日志,对于任何系统来说都是及其重要的组成部分。在计算机系统里面,更是如 ...
分类:
其他好文 时间:
2018-03-23 17:16:56
阅读次数:
150
elasticsearch 5.1 安装过程中遇到了一些问题做一些记录。 问题一:警告提示 [2016-12-20T22:37:28,543][INFO ][o.e.b.BootstrapCheck ] [elk-node1] bound or publishing to a non-loopbac ...
分类:
其他好文 时间:
2018-03-23 16:56:36
阅读次数:
291
ELK+Filebeat+Kafka+ZooKeeper 构建海量日志分析平台
分类:
其他好文 时间:
2018-03-23 15:26:39
阅读次数:
252
logstash处理mysql中datetime数据类型
分类:
数据库 时间:
2018-03-23 14:10:05
阅读次数:
345
应用场景:ELK实际上是三个工具的集合,ElasticSearch + Logstash + Kibana,这三个工具组合形成了一套实用、易用的监控架构, 很多公司利用它来搭建可视化的海量日志分析平台。 官网下载地址:https://www.elastic.co/downloads Elastics ...
分类:
其他好文 时间:
2018-03-22 12:39:02
阅读次数:
578
本文收录在Linux运维企业架构实战系列 做了几周的测试,踩了无数的坑,总结一下,全是干货,给大家分享~ 一、elk 实用知识点总结 1、编码转换问题(主要就是中文乱码) (1)input 中的codec => plain 转码 将GB2312 的文本编码,转为UTF-8 的编码 (2)也可以在fi ...
分类:
其他好文 时间:
2018-03-21 11:42:14
阅读次数:
283
大家好,我是曹林华,一枚后端程序猿2016年加入沪江,负责技术中心中间件产品设计与架构,承担了搜索平台、ELK、分布式跟踪、实验平台等架构设计曾任百度高级工程师职位,从事高并发Push相关的技术研发工作目前致力于解决分布式,高并发,大数据量等各种技术难题与挑战,持续优化公司基础架构产品,保证系统高可靠、高性能、高可扩展性如果想咨询相关技术与架构的问题,可以扫描下面二维码加入我建的知识星球
分类:
其他好文 时间:
2018-03-17 15:27:21
阅读次数:
135
每次有新服务器上线的时候我们需要采集日志信息涉及到各种配置: rsyslog客户端 rsyslog中继服务器 rsyslog服务器 logstash-shipper 如果手动配置的话工作量较大,而且容易出错。写了个脚本以便快速部署。 文件结构如下 执行log-make.sh将询问操作内容,1为创建配 ...
分类:
其他好文 时间:
2018-03-17 12:15:51
阅读次数:
216