一、相关文档老规矩，为了避免我的解释误导大家，请大家务必通过官网了解一波SQL SERVER的相关功能。文档地址：整体介绍文档：https://docs.microsoft.com/en-us/sql/relational-databases/track-changes/about-change-t... ...
分类：
数据库 时间：
2019-08-16 00:33:30
阅读次数：
168
elasticsearch官网建议生产环境需要设置bootstrap.memory_lock: true 重新启动elasticsearch，报错信息如下： [baoshan@test-43.dev.rokid-inc.com /home/baoshan/elk/elasticsearch-5.3. ...
分类：
其他好文 时间：
2019-08-15 21:11:45
阅读次数：
135
1.1 flume（日志收集系统） 1.1.1 flume介绍 flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。支持在日志系统中定制各类数据发送方，用于收集数据;同时，Flume提供对数据进行简单处理，并写到各种数据接受方(比如文本、HDFS、Hbase等)的能力 。 flu ...
分类：
Web程序 时间：
2019-08-14 12:53:23
阅读次数：
131
一、ELK简介ElasticsearchElasticsearch是一个实时的分布式搜索分析引擎，它能让你以一个之前从未有过的速度和规模，去探索你的数据。它被用作全文检索、结构化搜索、分析以及这三个功能的组合2.LogstashLogstash是一款强大的数据处理工具，它可以实现数据传输，格式处理，格式化输出，还有强大的插件功能，常用于日志处理。3.Kibanakibana是一个开源和免费的工具，
分类：
其他好文 时间：
2019-08-14 09:22:35
阅读次数：
129
今天10点时候同事报出kibana突然不显示log了，开始紧急排查 1. 从数据源头查起,先看被filebeat监视的log文件是否在更新(一般只要log对应服务在正常运行，log文件中就会有数据持续更新) tail -f log.log 发现log中数据在持续更新，说明数据源头没有问题 2. 查看 ...
分类：
其他好文 时间：
2019-08-13 11:49:46
阅读次数：
1332
说起大数据，很多人都能聊上一会，但要是问大数据核心技术有哪些，估计很多人就说不上一二来了。从机器学习到数据可视化，大数据发展至今已经拥有了一套相当成熟的技术树，不同的技术层面有着不同的技术架构，而且每年还会涌现出新的技术名词。面对如此庞杂的技术架构，很多第一次接触大数据的小白几乎都是望而生畏的。其实想要知道大数据有哪些核心技术很简单，无非三个过程：取数据、算数据、用数据。这么说可能还是有人觉得太空
分类：
其他好文 时间：
2019-08-13 00:11:25
阅读次数：
174
面向微服务开发时会涉及到多系统的日志跟踪，一旦出现问题过滤起来系统间切换非常麻烦，所以需要采用特定工具将日志统一归类处理，方便查询排查错误，下面将介绍一种开源的工具ELK. ELK由ElasticSearch、Logstash和Kiabana三个开源工具组成。官方下载地址：https://www.e ...
将软件上传到服务器192.168.1.21上$cd/usr/local/src/$lselasticsearch-6.5.1.rpmjdk-8u191-linux-x64.rpm准备硬盘用于存储日志数据$fdisk-l$fdisk/dev/sdb$fdisk-l$blkid/dev/sdb1$mkfs.xfs/dev/sdb1$blkid/dev/sdb1$vim/etc/fstabUUID=&q
分类：
Web程序 时间：
2019-08-11 13:22:09
阅读次数：
130
基础架构：1/Kibana---->elasticsearch---->Logstash(收集)2/Kibana---->elasticsearch---->filebeat(收集)3/Kibana---->elasticsearch---->Logstash(过滤)---->filebeat(收集)扩展架构：1/Kibana---->elastic
分类：
其他好文 时间：
2019-08-10 13:42:36
阅读次数：
281
简单概述 最近在了解ELK做日志采集相关的内容，这篇文章主要讲解通过filebeat来实现日志的收集。日志采集的工具有很多种，如fluentd, flume, logstash,betas等等。首先要知道为什么要使用filebeat呢？因为logstash是jvm跑的，资源消耗比较大，启动一个log ...
分类：
其他好文 时间：
2019-08-09 19:55:07
阅读次数：
201
