面试官:想了解应聘者之前公司接触的 ES 使用场景、规模,有没有做过比较大 规模的索引设计、规划、调优。 解答: 如实结合自己的实践场景回答即可。 比如:ES 集群架构 13 个节点,索引根据通道不同共 20+索引,根据日期,每日 递增 20+,索引:10 分片,每日递增 1 亿+数据, 每个通道每 ...
分类:
其他好文 时间:
2020-06-20 19:36:09
阅读次数:
80
这里的索引文档应该理解为文档写入 ES,创建索引的过程。 文档写入包含:单文档写入和批量 bulk 写入,这里只解释一下:单文档写入流程。 记住官方文档中的这个图。 第一步:客户写集群某节点写入数据,发送请求。(如果没有指定路由/协调节点, 请求的节点扮演路由节点的角色。)第二步:节点 1 接受到请 ...
分类:
其他好文 时间:
2020-06-20 11:38:43
阅读次数:
168
协调节点默认使用文档 ID 参与计算(也支持通过 routing),以便为路由提供合适的分片。 shard = hash(document_id) % (num_of_primary_shards) 1、当分片所在的节点接收到来自协调节点的请求后,会将请求写入到 Memory Buffer,然后定时 ...
分类:
其他好文 时间:
2020-06-20 11:24:13
阅读次数:
115
1、关闭缓存 swap; 2、堆内存设置为:Min(节点内存/2, 32GB); 3、设置最大文件句柄数; 4、线程池+队列大小根据业务需要做调整; 5、磁盘存储 raid 方式——存储有条件使用 RAID10,增加单节点性能以及避免单节点存储故障。 ...
分类:
系统相关 时间:
2020-06-20 11:17:31
阅读次数:
100
Kibana介绍 Kibana 是一款开源的数据分析和可视化平台,它是 Elastic Stack 成员之一,设计用于和 Elasticsearch 协作。您可以 使用 Kibana 对 Elasticsearch 索引中的数据进行搜索、查看、交互操作。您可以很方便的利用图表、表格及地图对 数据进行 ...
分类:
其他好文 时间:
2020-06-20 11:15:09
阅读次数:
72
Lucene 是有索引和搜索的两个过程,包含索引创建,索引,搜索三个要点。可以基于这个脉络展开一些。 最近面试一些公司,被问到的关于 Elasticsearch 和搜索引擎相关的问题,以及自己总结的回答。 ...
分类:
其他好文 时间:
2020-06-20 11:02:17
阅读次数:
83
elasticsearch 单节点常见问题 记录elasticsearch 单节点使用时,出现健康状态为 集群健康值:yellow (23 of 46),主要是后面的数字时前面数字的两倍,则这个问题时分片副本问题。 ES 健康的三种状态 状态为green 时,(代表健康状态,说明分片备份都可以用) ...
分类:
其他好文 时间:
2020-06-20 01:29:26
阅读次数:
212
Search Console 是 搜索引擎 Google 旗下的一款免费站长工具,类似于我们国内的目前的百度资源平台和其他搜索引擎的站长平台,通过注册验证网站域名,可以直观的看到网站在搜索引擎中的一些点击展现数据,以及工具提供的其它管理性的功能,同时也能接收到搜索引擎对网站检测的一些提示或通知信息, ...
分类:
其他好文 时间:
2020-06-20 01:23:11
阅读次数:
883
1、安装open-jdk sudo apt-get install openjdk-8-jdk 2、官网查找需要的es版本 es官网:https://www.elastic.co/cn/downloads/elasticsearch 点击如下图【apt-get】 查找自己想要的版本,点击使用deb方 ...
分类:
系统相关 时间:
2020-06-19 23:13:14
阅读次数:
174
1、Elasticsearch 的选主是 ZenDiscovery 模块负责的,主要包含 Ping(节点之 间通过这个 RPC 来发现彼此)和 Unicast(单播模块包含一个主机列表以控制哪 些节点需要 ping 通)这两部分; 2、对所有可以成为 master 的节点(node.master: ...
分类:
其他好文 时间:
2020-06-19 22:41:48
阅读次数:
200