日志是每个系统最为头疼的地方，杂乱，还多，没有还不行，想管理好的话，得经得起考验，要解决的问题总结如下： （1）高并发 （2）高吞吐量 （3）支持分布式集群 （4）检索要快 简介： 1.Zoomkeeper Kafka的通道 2. Kafka Kafka主要是解决大量日志的处理的分布式发布订阅消息系 ...
分类：
Web程序 时间：
2020-04-08 12:05:55
阅读次数：
124
ELK下载 https://www.elastic.co/cn/downloads/ Elasticsearch搭建 "Elasticsearch" "集群" Logstash搭建 因为没有真实的环境的，我就手动上传了两个log日志文件做测试使用 在Logstash/config下面新增一个配置文件 ...
分类：
其他好文 时间：
2020-04-08 09:50:38
阅读次数：
76
本来想基于docker搭建一套ELK玩一玩日志,奈何难度有点大,没能继续下去,后来转念一想,我是要使用elk来管理日志而已,又不是要做运维,所以直接找一款云上产品直接使用起来就可以了. 这是就上咱阿里云平台上看看啦,想起来他们有个SLS.用法与ELK类似.sls每个月还有500M的免费额度可以使用. ...
分类：
其他好文 时间：
2020-04-06 23:54:16
阅读次数：
367
ELK 是什么？ 通俗来讲，ELK 是由 Elasticsearch、Logstash、Kibana 三个开源软件组成的一个组合体，这三个软件当中，每个软件用于完成不同的功能，ELK 又称 ELKstack。 官网： https://www.elastic.co/ ELK 主要优点： 1、处理方式灵 ...
分类：
其他好文 时间：
2020-04-06 10:07:43
阅读次数：
79
ElasticSearch安装，能够调用RestAPI完成基本的增删改查操作 完成Head插件安装，熟悉Head插件的基本用法 完成IK分词器的安装，能够使用IK分词器进行分词 使用SpringDataElasticSearch完成搜索引擎微服务的开发 使用logstash完成mysql与Elast ...
分类：
其他好文 时间：
2020-04-03 18:23:42
阅读次数：
72
两种方法配置Spring项目输出JSON到LogStash或者使用FileBeat收集上传到ELK
分类：
编程语言 时间：
2020-04-02 01:20:53
阅读次数：
79
一、访问流追踪 log-trace： 减少代码级别插入日志 详细调用访问链路 唯一请求id,方便搜索 二、日志实时展示 1. 日志收集 使用队列，采用发布订阅模式 Kafka/RabbitMq: 使用logback 配置appender AMQP 消费端直接读取 支持ELK Mqtt: IBM协议， ...
分类：
其他好文 时间：
2020-04-01 14:55:28
阅读次数：
65
一、说说前因后果elasticsearch,kafka,zookeeper,kibana,elasticsearch-head,logstash，logstash是需要经常重启的，你上了点过滤规则或者修改点啥的，每次都尼玛杀进程，再nohup，还看不到日志，这太不符合人性了，人性的优点之一就是懒惰。打开web界面，点一下鼠标解决问题岂不是棒棒哒，还能通过web界面看看后台日志，故而用supervi
分类：
其他好文 时间：
2020-04-01 11:08:17
阅读次数：
74
1.三个节点 2.安装包 3.安装JDK-12版本 在/etc/profile添加环境变量 [root@node3 ~]# source /etc/profile cat >>/etc/profile <EOF export JAVA_HOME=/usr/java/jdk-12.0.1export ...
分类：
其他好文 时间：
2020-04-01 10:41:45
阅读次数：
54
