DockerFile构建ElasticSearch镜像安装IK中文分词器插件 为什么要安装IK中文分词器? ES提供的分词是英文分词,对中文做分词时会拆成单字而不是词语,非常不好,因此索引信息含中文时需要使用中文分词器插件。 一、环境及文件准备 环境准备 VMWare版本:15.5.5 操作系统:C ...
分类:
其他好文 时间:
2020-07-29 17:44:12
阅读次数:
85
背景 ElasticSearch 的使用度越来越普及了,很多公司都在使用。有做日志搜索的,有做商品搜索的,有做订单搜索的。 大部分使用场景都是通过程序定期去导入数据到 ElasticSearch 中,或者通过 CDC 的方式来构建索引。在这种场景下,更新数据都是单条更新,比如 ID=1 的数据发生了 ...
分类:
其他好文 时间:
2020-07-29 15:39:34
阅读次数:
155
1、问题引出微信群里的线上实战问题:诸位大哥,es中:keyword类型的字段进行高亮查询,值为123asd456,查询sd4,高亮结果是em123asd456em有没有办法只对我查询的sd4高亮?明明查询id的一部分,却高亮结果是整个id串,怎么办?死磕Elasticsearch技术微信群2、一个Demo描述清楚问题注:本文示例DSL在7.2版本运行ok,6.X之前早期版本可能需要微调。PUTf
分类:
其他好文 时间:
2020-07-29 15:05:11
阅读次数:
164
题记几个月以来,我一直在记录自己开发Elasticsearch应用程序的最佳实践。本文梳理的内容试图传达Java的某些思想,我相信其同样适用于其他编程语言。我尝试尽量避免重复教程和Elasticsearch官方文档中已经介绍的内容。本文梳理的内容都是从线上实践问题和个人总结的经验汇总得来的。文章从以下几个维度展开讲解:映射(Mapping)设置(Setting)查询方式(Querying)实战技巧
分类:
其他好文 时间:
2020-07-29 15:04:50
阅读次数:
71
1、问题描述您好,请教个问题。我现在有2千多万的手机号码信息保存在es里。5个分片,3个节点。现在的需求是将后八位相同的号码匹配到一起,重新放到一个index里。组成情侣号。方便后续查询情侣号列表。我目前的做法是用scroll查询出一万条,多线程循环一万条中的每条,去全库扫描---但是这种做法一分钟才能处理一万条。您有什么新的思路没。死磕Elasticsearch知识星球https://t.zsx
分类:
移动开发 时间:
2020-07-29 15:04:19
阅读次数:
82
1 ElasticSearch简介 1.1 什么是ElasticSearch ? Elasticsearch是一个实时的分布式搜索和分析引擎。它可以帮助你用前所未有的速度去处理大规模数据。ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于R ...
分类:
其他好文 时间:
2020-07-29 14:41:02
阅读次数:
88
题记几个月以来,我一直在记录自己开发Elasticsearch应用程序的最佳实践。本文梳理的内容试图传达Java的某些思想,我相信其同样适用于其他编程语言。我尝试尽量避免重复教程和Elasticsearch官方文档中已经介绍的内容。本文梳理的内容都是从线上实践问题和个人总结的经验汇总得来的。文章从以下几个维度展开讲解:映射(Mapping)设置(Setting)查询方式(Querying)实战技巧
分类:
其他好文 时间:
2020-07-29 12:48:00
阅读次数:
83
题记:技术交流群中有小伙伴提及:“es节点默认1000个分片的限制”?这引发了我对Elasticsearch默认值的关注。我一搜不要紧:聊天记录中涉及“默认”关键词的讨论接近400多处。这些默认值对于架构选型、开发实战、运维排查性能问题等都有很好的借鉴价值,虽官方文档都有详细论述,但散落在各个角度。处于本能的好奇心,我认为非常有必要结合自己的实战经历梳理出Elasticsearch最常用的默认值的
分类:
其他好文 时间:
2020-07-29 10:38:49
阅读次数:
116
首先打开Elasticsearch官网了解对应编程语言的API https://www.elastic.co/guide/en/elasticsearch/client/index.html 点击 PHP API即可查看当前7.X版本的文档内容了 安装操作Elasticsearch的PHP库 我们使 ...
分类:
Web程序 时间:
2020-07-29 00:39:56
阅读次数:
226
现在的logstash版本,插件都是自带的,所以不需要安装ruby和logstash,如果需要的插件没有在安装 安装配置Ruby 我的CentOS的版本比较低,是CentOS6.6的,直接通过yum安装的Ruby的版本比较低,导致安装的时候会出现很多问题(网上的很多解决方案写的很高档,但是都没有解决 ...
分类:
其他好文 时间:
2020-07-28 22:50:30
阅读次数:
105