本篇介绍了零停机索引重建操作的三个方案,从自研功能、scroll+bulk到reindex,我们作为Elasticsearch的使用者,三个方案的参与度是逐渐弱化的,但稳定性却是逐渐上升的,我们需要清楚地去了解各个方案的优劣,适宜的场景,然后根据实际的情况去权衡,哪个方案更适合我们的业务模型,仅供参考。
分类:
其他好文 时间:
2020-05-28 12:50:09
阅读次数:
58
es版本7.6。 在使用python操作es执行date_histogram后台报错“elasticsearch.exceptions.TransportError:TransportError(503...”,kibana里执行同样的条件,报“Trying to create too many b ...
分类:
编程语言 时间:
2020-05-28 09:16:56
阅读次数:
151
综合练习 下面将所学习到的Elasticsearch + Logstash + Beats + Kibana整合起来做一个综合性的练习,目的就是让学生们能够更加深刻的理解Elastic Stack的使用。 1.1 、流程说明 应用APP生产日志,用来记录用户的操作 [INFO] 2020-05-27 ...
分类:
其他好文 时间:
2020-05-27 18:42:03
阅读次数:
68
https://www.cnblogs.com/WeaRang/p/12421842.html 背景 这两年互联网行业掀着一股新风,总是听着各种高大上的新名词。大数据、人工智能、物联网、机器学习、商业智能、智能预警啊等等。 以前的系统,做数据可视化,信息管理,流程控制。现在业务已经不仅仅满足于这种简 ...
分类:
数据库 时间:
2020-05-27 18:22:27
阅读次数:
72
排版比较丑,但按照此步骤执行一定会搭建成功。 一、环境描述及准备 1.下载Elasticsearch包 curl -L -O https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.7.0-linux-x86_64.t ...
分类:
其他好文 时间:
2020-05-27 12:02:56
阅读次数:
76
elasticsearch权威指南:https://es.xiaoleilu.com/ spring_data_elasticsearch:https://wangkang007.gitbooks.io/java/spring_data_elasticsearchjie_shao.html ...
分类:
其他好文 时间:
2020-05-26 18:28:51
阅读次数:
54
Redis支持RDB和AOF两种持久化机制,持久化功能有效地避免因进程退出,服务器故障等造成的数据丢失问题,当下次Redis重启时利用之前持久化的文件即可实现数据恢复 RDB持久化 可以在指定时间间隔内生成数据集的时间点快照(point-in-time snapshot),新快照会覆盖旧快照,占用空 ...
分类:
其他好文 时间:
2020-05-26 15:15:11
阅读次数:
47
前言 收集大量的日志信息之后,把这些日志存放在哪里?才能对其日志内容进行搜素呢?MySQL? 如果MySQL里存储了1000W条这样的数据,每条记录的details字段有128个字。 用户想要查询details字段包含“ajax”这个关键词的记录。 MySQL执行 select * from log ...
分类:
其他好文 时间:
2020-05-26 12:20:08
阅读次数:
61
安装 下载解压 elasticsearch-7.7.0-linux-x86_64.tar.gz tar -zxvf elasticsearch-7.7.0-linux-x86_64.tar.gz -C /mnt/hgfs/shareLinux/ z:通过gzip指令处理备份文件。 x:从备份文件中还 ...
分类:
其他好文 时间:
2020-05-26 01:20:21
阅读次数:
356
ELK·Elastic Stack Elastic Stack就一套日志分析系统,前身叫ELK。 E:Elasticsearch L:Logstash,日志收集系统 K:Kibana,数据可视化平台 现加入Beats,是一个数据采集器,可以直接上报给elasticsearch,也可以通过logsta ...
分类:
其他好文 时间:
2020-05-26 00:52:11
阅读次数:
309