Logstash：把MySQL数据导入到Elasticsearch中 前提条件 需要安装好Elasticsearch及Kibana。 MySQL安装 根据不同的操作系统我们分别对MySQL进行安装。我们可以访问网页来对MySQL进行安装。等我们安装完我们的MySQL后，在我们的terminal中，打 ...
分类：
数据库 时间：
2019-12-21 13:43:53
阅读次数：
94
为了充分利用 Elasticsearch 提供的强大搜索功能，很多公司都会在既有关系型数据库的基础上再部署Elasticsearch。在这种情况下，很可能需要确保 Elasticsearch 与所关联关系型数据库中的数据保持同步。因此，在本篇博文中，我会演示如何使用 Logstash 来高效地复制数 ...
分类：
数据库 时间：
2019-12-21 13:24:44
阅读次数：
90
利用ingest node所提供的Pipeline帮我们对数据进行处理。 在Elasticsearch中的配置文件elasticsearch.yml文件中配置： ingest node提供了在对文档建立索引之前对其进行预处理的功能： 接收节点拦截索引或批量API请求 运用转换（transformat ...
分类：
其他好文 时间：
2019-12-21 11:58:42
阅读次数：
183
elasticsearch7.5.0+kibana-7.5.0+cerebro-0.8.5集群生产环境安装配置及通过elasticsearch-migration工具做新老集群数据迁移 ...
分类：
其他好文 时间：
2019-12-20 21:04:46
阅读次数：
200
.1什么是Lucene Lucene是一个开放源代码的全文检索引擎工具包，但它不是一个完整的全文检索引擎，而是一个全文检索引擎的架构。 在全文搜索领域中，Lucene可以被认为是迄今为止最先进、性能最好的、功能最全的搜索引擎库。 但是Lucene只是一个库。想要使用它，你必须使用Java来作为开发语 ...
分类：
Web程序 时间：
2019-12-20 20:34:26
阅读次数：
170
1.elasticsearch相关介绍 （1）Near Realtime（NRT）：近实时，两个意思，从写入数据到数据可以被搜索到有一个小延迟（大概1秒）；基于es执行搜索和分析可以达到秒级 （2）Index：索引库，包含一堆有相似结构的文档数据，比如可以有一个客户索引，商品分类索引，订单索引，索引 ...
分类：
其他好文 时间：
2019-12-20 20:22:36
阅读次数：
93
官网镜像地址：https://hub.docker.com/_/kibana 使用和 elasticsearch 相同版本镜像 6.4.0 （不一样可能会出现问题） 1、下载镜像 docker pull kibana:6.4.0 2、运行容器 docker run -d --name kibana ...
分类：
其他好文 时间：
2019-12-20 18:36:31
阅读次数：
65
Elasticsearch系列，补充bulk，一致性几个知识点 ...
分类：
其他好文 时间：
2019-12-19 10:09:43
阅读次数：
78
ELK日志分析系统概述ELK是Elasticsearch、Logstash、Kibana的简称Elasticsearch是实时全文搜索和分析引擎Logstash是一个用来搜集、分析、过滤日志的工具Kibana是一个基于Web的图形界面，用于搜索、分析和可视化存储在Elasticsearch指标中的日志数据日志服务器提高安全性集中存放日志缺陷：对日志的分析困难ELK日志分析系统收集数据：Logsta
分类：
其他好文 时间：
2019-12-19 09:46:30
阅读次数：
340
配置主机hosts文件 说明： 192.168.75.20主机上配置filebeat，logstash和kibana 192.168.75.22主机上配置elasticsearch instances.yml文件内容 存储路径：/usr/share/elasticsearch 生成证书 es配置 设 ...
分类：
Web程序 时间：
2019-12-18 19:05:10
阅读次数：
430
