ELK日志收集部署1.时间同步:ntpdatepool.ntp.orgecho‘*/5****ntpdatepool.ntp.org’>>/var/spool/cron/root2.关闭防火墙和selinux/etc/init.d/iptablesstopchkconfigiptablesoffSed–I‘s/SELINUX=enforcing/SELINUX=disabled/g’/etc/selinux/config3.安装javahttp:/..
分类:
其他好文 时间:
2017-02-24 19:54:15
阅读次数:
213
索引膨胀,主要针对B-tree而言 索引膨胀的几个来源: 大量删除发生后,导致索引页面稀疏,降低了索引的使用效率; PG9.0之前的版本,vacuum full会同样导致索引页面稀疏; 长时间运行的事务,禁止vacuum对表的清理工作二导致页面稀疏状态一致保持。 注意REINDEX会造成全表锁,不要 ...
分类:
数据库 时间:
2017-02-23 20:47:36
阅读次数:
294
Learn how you can maximize big data in the cloud with Apache Hadoop. Download this eBook now. Brought to you in partnership with Hortonworks. In Febru ...
分类:
其他好文 时间:
2017-02-20 13:55:09
阅读次数:
987
背景: 最近线上上了ELK,但是只用了一台Redis在中间作为消息队列,以减轻前端es集群的压力,Redis的集群解决方案暂时没有接触过,并且Redis作为消息队列并不是它的强项;所以最近将Redis换成了专业的消息信息发布订阅系统Kafka, Kafka的更多介绍大家可以看这里:传送门 ,关于EL ...
分类:
其他好文 时间:
2017-02-17 20:16:37
阅读次数:
290
转自:http://blog.csdn.net/a2011480169/article/details/51544664 在具体介绍本文内容之前,先给大家看一下Hadoop业务的整体开发流程: 从Hadoop的业务开发流程图中可以看出,在大数据的业务处理过程中,对于数据的采集是十分重要的一步,也是不 ...
分类:
Web程序 时间:
2017-02-16 10:51:32
阅读次数:
366
再探ELK-全新的ELK-5.2.02017/2/15
一、环境
1、RPM
1)收集rpm包
wgethttps://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-5.2.0.rpm
wgethttps://artifacts.elastic.co/downloads/kibana/kibana-5.2.0-x86_64.rpm
wgethttps://artifacts.elastic.co/downloa..
分类:
其他好文 时间:
2017-02-15 19:41:20
阅读次数:
404
环境:centos6.8准备好ELK三个安装包,到官网下官网https://www.elastic.co/1、安装elasticsearch这里安装1.8版本的2、安装elasticsearch下载安装包(tar)https://www.elastic.co/downloads/elasticsearch直接解压到/usr/local下面tar-xzfelasticsearch-5.2.0.tar.gz-C/usr/lo..
分类:
其他好文 时间:
2017-02-14 22:57:47
阅读次数:
429
对于日志收集统计分析方案现在主流的有ELKrediskafkaflume+大数据平台,ELK我们以后再介绍,这里先简单介绍下rsyslog对接kafkakafka中的术语BrokerKafka集群包含一个或多个服务器,这种服务器被称为brokerTopic每条发布到Kafka集群的消息都有一个类别,这个类别被称为Topic。(..
分类:
其他好文 时间:
2017-02-13 14:20:27
阅读次数:
876
http://blog.csdn.net/lgnlgn/article/details/8053626 elasticsearch学习入门 检查ES集群状态: curl 54.223.139.77:9200/_cat/health?v 检查ES节点状态: curl 54.223.139.77:920 ...
分类:
其他好文 时间:
2017-02-12 11:10:46
阅读次数:
214
原作者:http://www.cnblogs.com/snidget/p/6269383.html ELK ELK是什么? Elasticsearch LogStash Kibana 1,简单的安装 我采用的是本地window环境; 下载的包如下: 首先安装的是jdk8,安装完成之后,设置路径, 增 ...
分类:
其他好文 时间:
2017-02-11 23:51:52
阅读次数:
192