解析-analysis 1. 解析-analysis 可以理解为分词。 解析由解析器——analyzer执行，解析器包括内置和用户自定义两种。 1.1. 解析器 1.1.1. 内置解析器 doc:https://www.elastic.co/guide/en/elasticsearch/refere ...
分类：
其他好文 时间：
2019-09-21 15:12:26
阅读次数：
105
elasticsearch 分词器 1. 分词器构造 一个分词器——无论内置还是自定义，是一个包含三个生成块的包：character filters, tokenizers, and token filter.（字符过滤器，断词，分词过滤） 1.1. character filters 字符过滤器接 ...
分类：
其他好文 时间：
2019-09-21 14:24:08
阅读次数：
85
海量数据搜索---demo展示百度、谷歌搜索引擎的实现然后我们根据这个字典树来对这段话进行词语切分。IK分词器中，基本可以分为两种模式：一种是smart模式、一种是非smart模式，可以在代码中初始化的时候去配置。
分类：
其他好文 时间：
2019-09-11 11:57:13
阅读次数：
88
一、场景简介 最近在做公众号关键词回复方面的智能问答相关功能，发现用户输入提问内容和我们运营配置的关键词匹配回复率极低，原因是我们采用的是数据库的Like匹配。 这种模糊匹配首先不是很智能，而且也没有具体的排序功能。为了解决这一问题，我引入了分词器+Lucene来实现智能问答。 二、功能实现 本功能 ...
分类：
编程语言 时间：
2019-09-06 15:47:15
阅读次数：
181
match 查询知道分词器的存在，会对field进行分词操作，然后再查询。而term不会分词，会把field当成一个整体查询。（备注：数据来自于上一篇） 1、用match查询name是zhaoliu或者zhaoming的，能查出两条记录，而用term查询不出来，因为倒排索引列表中没有 "zhaoli ...
分类：
其他好文 时间：
2019-09-01 16:42:13
阅读次数：
92
分词器是用来实现分词的，从一串文本当中切分出一个一个的单词（词条），并对每个词条进行标准化处理（大小写、单复数、同义词等转换）。分词器包括3部分： 1、character filter：分词之前的预处理，过滤掉html标签，特殊符号转换等。 2、tokenizer：分词， 3、token filte ...
分类：
其他好文 时间：
2019-08-24 18:20:07
阅读次数：
83
分析过程 当数据被发送到elasticsearch后并加入倒排序索引之前，elasticsearch会对文档进行处理： 字符过滤：使用字符过滤器转变字符。 文本切分为分词：将文本（档）分为单个或多个分词。 分词过滤：使用分词过滤器转变每个分词。 分词索引：最终将分词存储在Lucene倒排索引中。 整 ...
分类：
其他好文 时间：
2019-08-24 00:36:15
阅读次数：
163
一、前言 为什么要在elasticsearch中要使用ik这样的中文分词呢，那是因为es提供的分词是英文分词，对于中文的分词就做的非常不好了，因此我们需要一个中文分词器来用于搜索和使用。 二、IK分词器的安装和使用 2.1、安装ik 我们可以从官方github上下载该插件，我们下载对应于我们使用的e ...
分类：
其他好文 时间：
2019-08-21 00:03:11
阅读次数：
114
1，下载插件压缩包（本地测试建议用迅雷下，生产用的绝对不要用迅雷下），链接地址：https://github.com/medcl/elasticsearch-analysis-ik/releases/tag/v7.3.0 2，在 elasticsearch-7.3.0\plugins 目录下新建一个 ...
介绍：ElasticSearch 是一个基于 Lucene 的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于 RESTful web 接口。Elasticsearch 是用 Java 开发的，并作为Apache许可条款下的开放源码发布，是当前流行的企业级搜索引擎。设计用于云计算中，能够 ...
分类：
其他好文 时间：
2019-08-10 09:57:30
阅读次数：
247
