安装步骤 https://github.com/medcl/elasticsearch-analysis-ik 以插件形式安装： ...
分类：
其他好文 时间：
2018-01-21 13:46:05
阅读次数：
153
http://blog.csdn.net/guixunlong/article/details/8925990 从头开始编写基于隐含马尔可夫模型HMM的中文分词器之一 - 资源篇 首先感谢52nlp的系列博文（http://www.52nlp.cn/），提供了自然语言处理的系列学习文章，让我学习到了 ...
分类：
其他好文 时间：
2018-01-13 18:44:16
阅读次数：
191
solr分词过程： Solr Admin中，选择Analysis，在FieldType中，选择text_en 左边框输入 “冬天到了天气冷了小明不想上学去了”，点击右边的按钮，发现对每个字都进行分词。这不符合中国人的习惯。 solr6.3.0自带中文分词包，在 \solr-6.3.0\contrib ...
分类：
其他好文 时间：
2018-01-10 15:53:36
阅读次数：
945
一、安装实例 1、创建实例目录 [root@node004]# mkdir -p /usr/local/solr/home/jonychen 2、复制实例相关配置文件 [root@node004]# cp /usr/local/solr/home/configsets/_default/conf - ...
分类：
其他好文 时间：
2018-01-09 22:08:58
阅读次数：
751
一. 问题: 在使用solr时, 分词器解析中文的时候, 是一个一个字解析的. 这并不是我们想要的结果. 而在lucene中, 使用的中文分词器是 IKAnalyzer. 那么在solr里面, 是不是任然可以用这个呢. 二. 整合 ik 1. 修改schema配置文件 打开如下路径中的managed ...
分类：
其他好文 时间：
2017-12-27 23:54:07
阅读次数：
210
无论是solr还是luncene,都对中文分词不太好，所以我们一般索引中文的话需要使用ik中文分词器。 三台机器（192.168.1.236，192.168.1.237，192.168.1.238）已经安装好了solrcloud 我安装的是solr5.5使用的是ik是IKAnalyzer2012FF ...
分类：
其他好文 时间：
2017-10-26 13:28:21
阅读次数：
262
solr7,刚出来，如何让它成为一个web工程在tomcat上部署它，是一个重要的问题，以下步骤分别解决这些问题，同时使用IKAnalyzer中文分词器分词器。 一，修改solr7的源代码，让core所在的目录默认位于{webRoot上下文}/solr下面，从而在tomcat上部署该应用时不用再去修 ...
分类：
其他好文 时间：
2017-10-24 14:03:02
阅读次数：
158
1. 什么是中文分词器 对于英文，是安装空格、标点符号进行分词 对于中文，应该安装具体的词来分，中文分词就是将词，切分成一个个有意义的词。 比如：“我的中国人”，分词：我、的、中国、中国人、国人。 2. Lucene自带的中文分词器 StandardAnalyzer： 单字分词：就是按照中文一个字一 ...
分类：
Web程序 时间：
2017-10-09 02:02:17
阅读次数：
336
前面已经对”IK中文分词器“有了简单的了解： 但是可以发现不是对所有的词都能很好的区分，比如： 逼格这个词就没有分出来。 词库 实际上IK分词器也是根据一些词库来进行分词的，我们可以丰富这个词库。 IK分词器(IK Analysis for Elasticsearch)给了我们一个基本的配置： ht ...
分类：
其他好文 时间：
2017-09-27 11:31:31
阅读次数：
1238
paoding： 庖丁解牛最新版在 https://code.google.com/p/paoding/ 中最多支持Lucene 3.0，且最新提交的代码在 2008-06-03，在svn中最新也是2010年提交，已经过时，不予考虑。 mmseg4j：最新版已从 https://code.googl ...
分类：
其他好文 时间：
2017-09-03 16:06:37
阅读次数：
244
