本文是基于CentOS7的环境下使用rpm包安装进行说明。ELK的默认日志记录会增长很多，除ElasticSearch外，都会无限增长，长时间运行可能带来灾难性的后果（如：节点宕机）。这就是我们今天要面对的主要问题。主要策略为限制日志总量：时间+size，每天rotate一个日志文件或者每当日志文件大小超过256M，rotate一个新的日志文件，并且最多保留7天之内的日志文件。ElasticSea
分类：
其他好文 时间：
2019-08-16 11:54:00
阅读次数：
151
传统ELK图示： 单纯使用ElK实现分布式日志收集缺点？ 1、logstash太多了，扩展不好。 如上图这种形式就是一个 tomcat 对应一个 logstash，新增一个节点就得同样的拥有 logstash，可以说很浪费了。 2、读取IO文件，可能会产生日志丢失。 3、不是实时性 比如logsta ...
分类：
其他好文 时间：
2019-08-16 00:56:00
阅读次数：
209
一、相关文档老规矩，为了避免我的解释误导大家，请大家务必通过官网了解一波SQL SERVER的相关功能。文档地址：整体介绍文档：https://docs.microsoft.com/en-us/sql/relational-databases/track-changes/about-change-t... ...
分类：
数据库 时间：
2019-08-16 00:33:30
阅读次数：
168
elasticsearch官网建议生产环境需要设置bootstrap.memory_lock: true 重新启动elasticsearch，报错信息如下： [baoshan@test-43.dev.rokid-inc.com /home/baoshan/elk/elasticsearch-5.3. ...
分类：
其他好文 时间：
2019-08-15 21:11:45
阅读次数：
135
一、ELK简介ElasticsearchElasticsearch是一个实时的分布式搜索分析引擎，它能让你以一个之前从未有过的速度和规模，去探索你的数据。它被用作全文检索、结构化搜索、分析以及这三个功能的组合2.LogstashLogstash是一款强大的数据处理工具，它可以实现数据传输，格式处理，格式化输出，还有强大的插件功能，常用于日志处理。3.Kibanakibana是一个开源和免费的工具，
分类：
其他好文 时间：
2019-08-14 09:22:35
阅读次数：
129
今天10点时候同事报出kibana突然不显示log了，开始紧急排查 1. 从数据源头查起,先看被filebeat监视的log文件是否在更新(一般只要log对应服务在正常运行，log文件中就会有数据持续更新) tail -f log.log 发现log中数据在持续更新，说明数据源头没有问题 2. 查看 ...
分类：
其他好文 时间：
2019-08-13 11:49:46
阅读次数：
1332
面向微服务开发时会涉及到多系统的日志跟踪，一旦出现问题过滤起来系统间切换非常麻烦，所以需要采用特定工具将日志统一归类处理，方便查询排查错误，下面将介绍一种开源的工具ELK. ELK由ElasticSearch、Logstash和Kiabana三个开源工具组成。官方下载地址：https://www.e ...
将软件上传到服务器192.168.1.21上$cd/usr/local/src/$lselasticsearch-6.5.1.rpmjdk-8u191-linux-x64.rpm准备硬盘用于存储日志数据$fdisk-l$fdisk/dev/sdb$fdisk-l$blkid/dev/sdb1$mkfs.xfs/dev/sdb1$blkid/dev/sdb1$vim/etc/fstabUUID=&q
分类：
Web程序 时间：
2019-08-11 13:22:09
阅读次数：
130
基础架构：1/Kibana---->elasticsearch---->Logstash(收集)2/Kibana---->elasticsearch---->filebeat(收集)3/Kibana---->elasticsearch---->Logstash(过滤)---->filebeat(收集)扩展架构：1/Kibana---->elastic
分类：
其他好文 时间：
2019-08-10 13:42:36
阅读次数：
281
简单概述 最近在了解ELK做日志采集相关的内容，这篇文章主要讲解通过filebeat来实现日志的收集。日志采集的工具有很多种，如fluentd, flume, logstash,betas等等。首先要知道为什么要使用filebeat呢？因为logstash是jvm跑的，资源消耗比较大，启动一个log ...
分类：
其他好文 时间：
2019-08-09 19:55:07
阅读次数：
201
