概要上一篇中多次提到了按相关性评分，本篇我们就来简单了解一下相关性评分的算法，以及正排索引排序的优势。评分算法Elasticsearch进行全文搜索时，BooleanModel是匹配的基础，先用booleanmodel将匹配的文档挑选出来，然后再运用评分函数计算相关度，参与的函数如我们提到的TF/IDF、LengthNorm等，再加上一些控制权重的参数设置，得到最后的评分。BooleanModel
分类：
编程语言 时间：
2020-05-25 13:56:39
阅读次数：
77
简略介绍： Logstash是elastic技术栈中的一员。它是一个数据采集引擎，可以从数据库采集数据到es中。我们可以通过设置自增id主键或者时间来控制数据的自动同步，这个id或者时间就是用于给logstash进行识别哪些数据需要同步的。 使用ID的方式，假设表中有1000条数据，Logstats ...
分类：
其他好文 时间：
2020-05-24 11:22:32
阅读次数：
75
1.简介 packbeat是一个开源的实时网络抓包与分析框架，内置了很多常见的协议捕获及解析，如HTTP、MySQL、Redis等。在实际使用中，通常和Elasticsearch以及kibana联合使用，用于数据搜索和分析以及数据展示。 目前Packebeat支持的协议如下: ICMP (v4 an ...
分类：
其他好文 时间：
2020-05-23 18:29:30
阅读次数：
78
基本流程：1）Logstash-Shipper获取日志信息发送到redis。2）Redis在此处的作用是防止ElasticSearch服务异常导致丢失日志，提供消息队列的作用。[注意,测试时如果写到redis里的日志量比较小,则很快就会被输送到elasticsearch,输送完之后,届时在redis ...
分类：
其他好文 时间：
2020-05-23 18:22:13
阅读次数：
84
一、 现象 用户打开消息推送有概率报错，后续发现推送消息阅读数、点赞数无法正常更新，mysql报警有行锁， DBA抓到有锁表语句，kill该语句未正常恢复，elk日志有大量的java.sql.SQLException: connection holder is null 重启应用恢复 二、分析 根据 ...
分类：
其他好文 时间：
2020-05-23 16:53:18
阅读次数：
50
1.安装Kibana 服务器角色 主机名 ip 服务 elk1 192.168.1.223 jdk1.8,es7.2,logstash, elk2 192.168.1.224 jdk1.8,es7.2,elasticsearch-head, kibana,cerebro elk3 192.168.1 ...
分类：
其他好文 时间：
2020-05-23 16:16:53
阅读次数：
54
一、Docker 部署 ElasticSearch 1、拉取镜像 docker pull elasticsearch:6.4.0 2、创建自定义网络 (用于连接到连接到同一网络的其他服务(例如Kibana)) docker network create somenetwork 3、运行容器 Elas ...
分类：
其他好文 时间：
2020-05-22 21:15:29
阅读次数：
72
嵌套类型的基本概念就不讲了,需要了解概念的,传送门:https://www.cnblogs.com/just84/p/10936034.html 对于嵌套类型的字段,要使用ES专用的嵌套查询 嵌套字段举例: brandInfo:[ ? { ? "group": "xx", ? "category": ...
分类：
其他好文 时间：
2020-05-22 19:15:37
阅读次数：
107
1、Homebrew 如果你已经安装过Homebrew了，那么你可以跳过这一步，直接进行Elasticsearch安装步骤； Homebrew是一款MacOS平台下的软件包管理工具，拥有安装、卸载、更新、查看、搜索等很多实用的功能，强烈推荐安装。 请复制如下指令到命令行粘贴执行： /usr/bin/ ...
分类：
系统相关 时间：
2020-05-22 13:09:56
阅读次数：
73
