1.docker安装ElasticSearch ps:前提是电脑必须安装好java并配置好环境变量 从远程仓库拉取镜像 docker pull elasticsearch:6.8.0 由于es需要的内存比较大,所以配置JVM修改内存 docker run -e ES_JAVA_OPTS="-Xms2 ...
分类:
编程语言 时间:
2020-02-24 00:14:45
阅读次数:
81
一个ES索引最大可以支持多少个shard?理论上无限扩展,我推测最大应该是java array的最大长度:Integer.MAX_VALUE。通常业务为了保证查询效率,往往会限制data node上shards的总个数(cluster.routing.allocation.total_shards_ ...
分类:
其他好文 时间:
2020-02-24 00:13:01
阅读次数:
236
ik分词是一款流行的elasticsearch 中文分词器,安装ik分词器版本一定要与所安装es版本一致。 安装步骤: 1、解压ik分词器安装包到plugin目录下,并删除压缩包。 2、重启elasticsearch进程即可。 3、如果是es集群的话,每台es都需要安装ik分词器。 测试: Curl ...
分类:
其他好文 时间:
2020-02-23 18:35:15
阅读次数:
92
ElasticStack从2019年1月29日的6.6.0版本的开始,引入了索引生命周期管理的功能,新版本的Filebeat则默认的配置开启了ILM,导致索引的命名规则被ILM策略控制。 加上这个配置就好了: filebeat 配置关闭 ILM 即可解决Index Pattern不生效的问题 具体配 ...
分类:
其他好文 时间:
2020-02-23 18:34:03
阅读次数:
481
安装Kibana 下载地址 https://www.elastic.co/cn/downloads/kibana 注意:Kibana与Elasticsearch的版本要互相对应,否则可能出现不兼容!!! 例如 ES版本7.6.0 Kibana也要7.6.0 下载完成后进行解压 修改对应配置文件 co ...
分类:
其他好文 时间:
2020-02-23 11:26:04
阅读次数:
80
环境:ES 6.2.2 os:Centos 7 kibana:6.2.2 1、创建新的索引(index) PUT indexTest001 结果: 2、索引设置 ES 默认提供了好多索引配置选项,参考https://www.elastic.co/guide/en/elasticsearch/refe ...
分类:
其他好文 时间:
2020-02-22 23:49:36
阅读次数:
85
1、什么是ES,为什么要用ES? Elasticsearch是一个基于Lucene的搜索引擎。它提供了具有HTTP Web界面和无架构JSON文档的分布式,多租户能力的全文搜索引擎。Elasticsearch是用Java开发的,根据Apache许可条款作为开源发布。 用ES做一个全文索引 2、Ela ...
分类:
其他好文 时间:
2020-02-22 22:08:55
阅读次数:
80
ES和Solr是2个比较常见的搜索引擎,但是Solr有控制台页面,ES就没有自带的,下面就推荐2个毕竟使用的工具。 ElasticHD ElasticHD 支持 ES监控、实时搜索、Index template快捷替换修改、索引列表信息查看, SQL converts to DSL工具等。是一款非常 ...
分类:
其他好文 时间:
2020-02-22 21:50:08
阅读次数:
118
需求背景业务系统将各类的报表和统计数据存放于ES中,由于历史原因,系统每天均以全量方式进行统计,随着时间的推移,ES的数据存储空间压力巨大。同时由于没有规划好es的索引使用,个别索引甚至出现超过最大文档数限制的问题,因此我们需要最小的代价来解决这个问题。下面以内网开发、测试环境举例使用python脚本解决这个问题。EachElasticsearchshardisaLuceneindex.There
分类:
编程语言 时间:
2020-02-21 18:33:04
阅读次数:
275
背景 Javashop电商系统的商品索引是使用的elasticsearch,对于高可用的要求有两个重要的考量: 1、集群化 2、可扩容 3、冗灾 冗灾就要实现es的持久化,要考虑到es宕机的情况,当es因不可抗因素挂掉了,当我们再恢复了es的运行后,商品索引也要随之 一起恢复。 本文着重讨论elas ...
分类:
Web程序 时间:
2020-02-21 17:42:35
阅读次数:
322