Marvel是Elastic公司推出的商业监控方案,是用来监控Elasticsearch集群,历史状态的有力工具,便于性能优化以及故障诊断。监控主要分为六个层面,分别是集群层、节点层、索引层、分片层、事件层、Sense。 l 监控参数配置 可以通过在每个节点的elasticsearch.yml中配置 ...
分类:
其他好文 时间:
2017-03-09 18:47:38
阅读次数:
907
转载:http://www.infoq.com/cn/articles/anatomy-of-an-elasticsearch-cluster-part02 共识——裂脑问题及法定票数的重要性 共识是分布式系统的一项基本挑战。它要求系统中的所有进程/节点必须对给定数据的值/状态达成共识。已经有很多共 ...
分类:
Web程序 时间:
2017-03-05 23:28:51
阅读次数:
344
转载:http://www.infoq.com/cn/articles/anatomy-of-an-elasticsearch-cluster-part03 近实时搜索 虽然Elasticsearch中的变更不能立即可见,它还是提供了一个近实时的搜索引擎。如前一篇中所述,提交Lucene的变更到磁盘 ...
分类:
其他好文 时间:
2017-03-05 23:20:39
阅读次数:
268
转载:http://elasticsearch.cn/article/110 ElasticSearch目前在互联网公司主要用于两种应用场景,其一是用于构建业务的搜索功能模块且多是垂直领域的搜索,数据量级一般在千万至数十亿这个级别;其二用于大规模数据的实时OLAP,经典的如ELKStack,数据规模 ...
分类:
其他好文 时间:
2017-02-28 22:51:09
阅读次数:
2469
ElasticSearch共有两个配置文件,都位于config目录下,分别是elasticsearch.yml和logging.yml,其中,elasticsearch.yml 是全局配置文件,用于在服务器级别对ElasticSearch进行配置。ElasticSearch的配置选项分为静态设置和动 ...
分类:
其他好文 时间:
2017-02-05 14:02:21
阅读次数:
1112
Elasticsearch是一个分布式的搜索引擎和数据分析引擎。本文重点谈一谈Elasticsearch的集群节点相关问题,搞清楚这些是进行Elasticsearch集群部署和拓扑结构设计的前提。
分类:
其他好文 时间:
2017-01-19 10:25:49
阅读次数:
265
因机器有限,本文只做单机3个节点的集群测试。 1、集群测试信息 elasticsearch版本:elasticsearch-2.4.1 windowns版本:win10 2、解压elasticsearch-2.4.1.zip到任意目录下,安装elasticsearch-head插件。 在${ESHO ...
分类:
其他好文 时间:
2016-12-14 19:00:02
阅读次数:
397
1准备工作/etc/profile添加vim高亮显示exportPS1="\[\e]0;\a\]\n\[\e[1;32m\]\[\e[1;33m\]\H\[\e[1;35m\]<\$(date+\"%Y-%m-%d%T\")>\[\e[32m\]\w\[\e[0m\]\n\u>\\$"服务器信息:192.168.91.220(elasticsearch-node1)
192.168.91.221(elasticsearch-node2)
192.168.9..
分类:
其他好文 时间:
2016-12-13 16:49:04
阅读次数:
573
由于公司的elasticsearch集群只是用了两台服务器。只要一台服务器数据丢失elasticsearch将丢失一半数据。所以数据的备份恢复就相当重要。elasticsearch快照和恢复模块可以创建单个索引或者整个集群的快照到远程的仓库实现数据的备份及恢复。下面以备份恢复.kibana索引为例数据..
分类:
其他好文 时间:
2016-12-08 00:09:51
阅读次数:
675
ELK是日志收益与分析的利器。 1、elasticsearch集群搭建 略 2、logstash日志收集 我这里的实现分如下2步,中间用redis队列做缓冲,可以有效的避免es压力过大: 1、n个agent对n个服务的log做日志收集(1对1的方式),从日志文件解析数据,存入broker,这里用的是 ...
分类:
其他好文 时间:
2016-11-11 14:08:34
阅读次数:
213