今天在统计pv和ip时遇到之前没有遇到的查询操作，在这里先记录下... 1、使用nested嵌套后，聚合查询当前嵌套的字段与嵌套外的字段，建议在嵌套内添加嵌套外需要聚合的字段： 2、跳出嵌套： 1 "aggs": { 2 "rev": { 3 "reverse_nested": {}, //跳出嵌套 ...
分类：
其他好文 时间：
2020-08-13 12:13:05
阅读次数：
43
搜索同一 query，结果ES返回的顺序却不尽相同，可能会有两个原因导致此问题发生： 这就是请求轮询到不同分片，而未设置排序条件，相同相关性评分情况下，是按照所在 segment 中 ?lucene id 来排序的，相同数据的不同备份之间该 id 是不能保证一致的，故造成结果震荡问题。 主节点 和 ...
分类：
其他好文 时间：
2020-08-10 19:51:35
阅读次数：
114
查看es集群健康状态curl-XGET"http://$ip:9200/_cat/health?"查看索引变红的原因curl-XGET"http://$ip:9200/_cluster/allocation/explain"如下确认索引是否可删除，或者调整副本为0
分类：
其他好文 时间：
2020-08-08 09:25:59
阅读次数：
119
首先从ES的支持的字段说起，ES文档中字段有多种类型 官方文档。 这几个比较常用: text,keyword,integer,float,boolean,object,geo_point(地理坐标),geo_shape(描述地理区域)，date. 注：不要以为date只能表示 2015-01-01 ...
分类：
其他好文 时间：
2020-08-07 18:08:11
阅读次数：
84
作者：bellen，腾讯云大数据研发工程师。腾讯云Elasticsearch被广泛应用于日志实时分析、结构化数据分析、全文检索等场景中，本文将以情景植入的方式，向大家介绍与腾讯云客户合作过程中遇到的各种典型问题，以及相应的解决思路与方法，希望与大家一同交流。背景因为游戏业务本身的日志数据量非常大(写入峰值在100wqps)，在服务客户的几个月中，踩了不少坑，经过数次优化与调整，把客户的ES集群调整
分类：
其他好文 时间：
2020-08-07 10:02:01
阅读次数：
67
作者：bellen，腾讯云大数据研发工程师。腾讯云Elasticsearch被广泛应用于日志实时分析、结构化数据分析、全文检索等场景中，本文将以情景植入的方式，向大家介绍与腾讯云客户合作过程中遇到的各种典型问题，以及相应的解决思路与方法，希望与大家一同交流。背景因为游戏业务本身的日志数据量非常大(写入峰值在100wqps)，在服务客户的几个月中，踩了不少坑，经过数次优化与调整，把客户的ES集群调整
分类：
其他好文 时间：
2020-08-07 10:01:06
阅读次数：
63
作者：bellen，腾讯云大数据研发工程师。腾讯云Elasticsearch被广泛应用于日志实时分析、结构化数据分析、全文检索等场景中，本文将以情景植入的方式，向大家介绍与腾讯云客户合作过程中遇到的各种典型问题，以及相应的解决思路与方法，希望与大家一同交流。背景因为游戏业务本身的日志数据量非常大(写入峰值在100wqps)，在服务客户的几个月中，踩了不少坑，经过数次优化与调整，把客户的ES集群调整
分类：
其他好文 时间：
2020-08-07 10:00:44
阅读次数：
66
课程大纲 1、Elasticsearch对复杂分布式机制的透明隐藏特性2、Elasticsearch的垂直扩容与水平扩容3、增减或减少节点时的数据rebalance4、master节点5、节点对等的分布式架构 1、Elasticsearch对复杂分布式机制的透明隐藏特性 Elasticsearch是 ...
分类：
其他好文 时间：
2020-08-07 00:33:15
阅读次数：
95
1、部署elaseticsearch 1.1、docker下载 docker pull elasticsearch docker images mkdir -p /usr/local/elasticsearch/{config,logs/{node0,node1,node2},data/{node0 ...
分类：
其他好文 时间：
2020-08-05 00:02:07
阅读次数：
75
1、应用场景实时数据流通过kafka后，根据业务需求，一部分直接借助kafka-connector入Elasticsearch不同的索引中。另外一部分，则需要先做聚类、分类处理，将聚合出的分类结果存入ES集群的聚类索引中。如下图所示：业务系统的分层结构可分为：接入层、数据处理层、数据存储层、接口层。那么问题来了？我们需要基于聚合（数据处理层）的结果实现检索和聚合分析操作，如何实现更快的检索和更高效
分类：
其他好文 时间：
2020-08-03 09:46:14
阅读次数：
76
