安装部署 下载rpm --import https://packages.elastic.co/GPG-KEY elasticsearch 修改配置文件 vim /etc/yum.repos.d/elasticsearch.repo 添加 name=Elasticsearch repository ...
分类:
其他好文 时间:
2019-08-14 14:47:04
阅读次数:
77
Setup1Nodeclusteronmylocallaptop:8core,Xms=8G,Xmx=8GIndexingperformance(Singleindex):10millionpayments,eachoneabout5KB,withbatchsize=10000.Eachbatchtakesroughly2.5s→4s,totaltimetoindex10millionpayment
分类:
其他好文 时间:
2019-08-13 15:13:38
阅读次数:
85
mapReduce 的优势在于分布式,这一节记录一个分布式统计的示例,整个过程分为这几步:启动分布式服务、手动分片、导入数据、执行 mapReduce。下面单独说说这几步。 1、启动分布式服务 参考前面的第10节和第11节,不在重复说了。 2、手动分片: sh.enableSharding('tes ...
分类:
数据库 时间:
2019-08-11 23:18:50
阅读次数:
165
依赖 一、连接 二、索引 三、查询 四、插入 https://www.elastic.co/guide/en/elasticsearch/client/java-api/6.8/index.html https://www.ruanyifeng.com/blog/2017/08/elasticsea ...
分类:
编程语言 时间:
2019-08-11 14:56:56
阅读次数:
76
1、应用场景 实时数据流通过kafka后,根据业务需求,一部分直接借助kafka connector入Elasticsearch不同的索引中。 另外一部分,则需要先做聚类、分类处理,将聚合出的分类结果存入ES集群的聚类索引中。如下图所示: 业务系统的分层结构可分为:接入层、数据处理层、数据存储层、接 ...
分类:
其他好文 时间:
2019-08-11 13:00:58
阅读次数:
145
部署方法 方法部署失败带来的影响部署时间零停机时间无 DNS 更改回滚过程代码部署到 一次部署全部 停机时间 ? ? 手动重新部署 现有实例 滚动 单个批次服务中断;任何在故障之前成功的批次将运行新应用程序版本 ? ? ? 手动重新部署 现有实例 附加批次滚动部署 如果第一个批次失败,则影响最小;否 ...
分类:
其他好文 时间:
2019-08-11 12:58:30
阅读次数:
81
安装和启动 这里使用docker进行安装的 然后使用 进行启动(因为需要很大的内存空间,所以把占用的内存空间限制在256m上) 以上是docker下的安装,注意要安装2.6以下的版本,5x以上的版本连接9300需要在yaml里面做配置 正常的安装 1.安装jdk 1.1 执行命令下面命令查看可安装j ...
分类:
其他好文 时间:
2019-08-10 17:34:17
阅读次数:
70
基础架构:1/Kibana---->elasticsearch---->Logstash(收集)2/Kibana---->elasticsearch---->filebeat(收集)3/Kibana---->elasticsearch---->Logstash(过滤)---->filebeat(收集)扩展架构:1/Kibana---->elastic
分类:
其他好文 时间:
2019-08-10 13:42:36
阅读次数:
281
https://aws.amazon.com/cn/getting-started/projects/launch-lamp-web-app/ 在本项目中,您将了解如何使用 AWS Elastic Beanstalk 和 Amazon Relational Database Service (RDS ...
分类:
Web程序 时间:
2019-08-09 19:23:13
阅读次数:
133
1、elasticsearch了解多少,说说你们公司es的集群架构,索引数据大小,分片有多少,以及一些调优手段 。2、elasticsearch的倒排索引是什么?3、elasticsearch 索引数据多了怎么办,如何调优,部署?4、elasticsearch是如何实现master选举的?5、详细描 ...
分类:
其他好文 时间:
2019-08-09 17:40:58
阅读次数:
302