欢迎大家前往腾讯云+社区，获取更多腾讯海量技术实践干货哦~本文由michelmu发表于云+社区专栏Elasticsearch作为当前主流的全文检索引擎，除了强大的全文检索能力和高扩展性之外，对多种数据源的兼容能力也是其成功的秘诀之一。而Elasticsearch强大的数据源兼容能力，主要来源于其核心组件之一的Logstash,Logstash通过插件的形式实现了对多种数据源的输入和输出。Kafka
分类：
其他好文 时间：
2018-11-12 19:48:15
阅读次数：
117
一、flume特点 flume是目前大数据领域数据采集的一个利器，当然除了flume还有Fluentd和logstash，其他的目前来说并没有深入的了解，但是我觉得flume能够在大数据繁荣的今天屹立不倒，应该有以下几点： 1. Flume可以将应用产生的数据存储到任何集中存储器中，完美的介入HDF ...
分类：
Web程序 时间：
2018-11-12 17:36:19
阅读次数：
239
``` ##关于s2安装cerebro来可视化集群管理##### https://blog.csdn.net/RWSLR6/article/details/79648767 https://github.com/lmenezes/cerebro/releases ######关于head安装####... ...
分类：
其他好文 时间：
2018-11-10 12:47:09
阅读次数：
165
有一台预上线的服务器最近在做压力测试，也引发了一系列的相关问题，排查思路可以提供参考。问题的起因就是收到同事提醒，根据监控报警提示，磁盘空间满了。上面有一个MySQL服务，现在已经写入不了数据了。createtabletest(idint);ERROR14(HY000):Can‘tchangesizeoffile(Errcode:28-Nospaceleftondevice)碰到这类问题，
分类：
数据库 时间：
2018-11-08 23:17:18
阅读次数：
228
nginx访问日志的格式，方便使用filebeat通过json的格式收集和推送到logstash解析；
分类：
数据库 时间：
2018-11-08 15:02:32
阅读次数：
169
不多说，直接上问题。版本logstash-2.4.0，启动后提示错误： 先说一下项目环境，由于项目需要，申请了8台主机，1台web应用主机（app），3台项目服务器负载均衡、每台搭载logstash处理操作日志（后面用gate1、gate2、gate3、gate4），3台日志存储服务器（es、red ...
分类：
其他好文 时间：
2018-11-05 17:25:20
阅读次数：
182
卸载deb版本的logstashcp/etc/logstash/conf.d/*.conf/bakservicestoplogstashdpkg-Plogstashrm/usr/share/logstashrm/etc/logstashrm/var/lib/logstashrm/var/log/logstash下载对应版本的logstashwgethttps://artifacts.elastic
分类：
系统相关 时间：
2018-11-03 17:29:15
阅读次数：
208
input { file { path => '/data/rsyslog/*/*/*.log' start_position => 'beginning' sincedb_path => '/data/rsyslog/sincedb/.db' } } filter { grok { match =... ...
分类：
其他好文 时间：
2018-11-03 10:27:57
阅读次数：
191
环境介绍： 服务端：192.168.0.248 ：（es ,logstash,kibana,redis） 客户端：192.168.0.151 192.168.0.219 一：服务器端配置 192.168.0.248： 1）安装es: https://www.cnblogs.com/yangxiaoc ...
分类：
其他好文 时间：
2018-11-02 18:59:25
阅读次数：
224
【From】 https://blog.csdn.net/iguyue/article/details/77006201 <!-- flowchart 箭头图标 勿删 --> ELK 之 Logstash 简介: ELK 之 LogstashLogstash 是一个接收,处理,转发日志的工具。支持系 ...
分类：
其他好文 时间：
2018-11-02 01:47:36
阅读次数：
158
