############本文介绍使用ELK(elasticsearch、logstash、kibana)+ kafka来搭建一个日志系统。主要演示使用springaop进行日志收集,然后通过kafka将日志发送给logstash,logstash再将日志写入elasticsearch,这样elasticsearch就有了日志数据了,最后,则使用kibana将存放在elasticsearch中的日志
分类:
编程语言 时间:
2019-01-10 19:30:48
阅读次数:
232
项目中需要用到jTidy把html格式化为xml文件,以便后续处理,然而在使用jTidy的时候,发现html文档里中文用jTidy转换后会乱码。 经过一阵研究,发现主要是jTidy的inCharEncoding和outCharEncoding需要设置为UTF 8才可以正常读取和写入中文字符。 关键代 ...
分类:
其他好文 时间:
2019-01-10 17:42:24
阅读次数:
169
一、使用背景 当生产环境有很多服务器、很多业务模块的日志需要每时每刻查看时 二、环境 系统:centos 6.5 JDK:1.8 Elasticsearch-5.0.0 Logstash-5.0.0 kibana-5.0.0 三、安装 1、安装JDK 下载JDK:http://www.oracle. ...
分类:
其他好文 时间:
2019-01-10 15:43:44
阅读次数:
148
一、简述 本文讲JAVA使用Logback发送日志到控制台、文件、ELK的最简单用法。 二、教程 1、新建pom.xml项目引入下列依赖: 2、在resources目录下添加logback.xml文件,将地址换成Logstash的地址,内容如下: 2、写程序发送日志 三、效果 ...
分类:
编程语言 时间:
2019-01-08 17:19:44
阅读次数:
282
写在最前:控制台输出中文乱码,完全是跟win10操作系统有关,跟VS基本无关,所以网上大量的用VS下载安装更新的解决办法是事倍功半的(而且不一定成功),本文的方法只需几个简单的步骤,就能解决中文乱码问题,简单明快。 本文参照此网友blog:https://blog.csdn.net/C_Khalid ...
分类:
其他好文 时间:
2019-01-06 16:41:12
阅读次数:
240
环境 : 一台 centos 6.7 IP地址: 192.168.88.250 软件版本 : ElasticSearch 2.1.0 Logstash 2.1.1 Kibana 4.3.1 JDK 1.8.0.77 JDK 我这里没有地址 就不连接了 下载好JDK 放在路径/usr/local/ja ...
分类:
其他好文 时间:
2019-01-03 10:47:52
阅读次数:
204
在上一章中,我们已经能够通过spring boot来使用Elasticsearch,但是由于我们习惯性的将数据写入mysql,所以为了解决之一问题,Elasticsearch为我们提供了一个插件logstash来同步我们的数据库。本文所有的安装环境和使用环境都是在windows系统下进行的。 一、l ...
分类:
数据库 时间:
2018-12-28 14:36:49
阅读次数:
302
filebeat的环境搭建 修改配置文件 启动 借鉴https://www.cnblogs.com/xishuai/p/elk-elasticsearch-kibana-logstash-filebeat-log4j2.html ...
分类:
其他好文 时间:
2018-12-27 20:19:18
阅读次数:
282
前两节已经成功完成ek的搭建,还剩最后的一个日志上传的功能 依次执行如下命令 创建配置文件 启动 ...
分类:
其他好文 时间:
2018-12-27 18:27:30
阅读次数:
424
1.下载和elasticsearch 相同版本的logstash. 2.进行解压后,进入bin下,新建一个文件mysql.conf,并输入 input { stdin{ }} output { stdout{ }} 3.cmd进入bin 下,输入logstash -f mysql.conf 启动后, ...
分类:
数据库 时间:
2018-12-27 15:22:24
阅读次数:
137