工作原理如下如所示:部署流程:1、安装logstash的JDK环境:#tarzvxfjdk-8u73-linux-x64.tar.gz
#mvjdk-8u73-linux-x64/usr/local/java
#vim/etc/profile
exportJAVA_HOME=/usr/local/java
CLASSPATH=/usr/local/java/lib/dt.jar/usr/local/java/lib/tools.jar
PATH=/usr/local..
分类:
其他好文 时间:
2016-09-29 22:09:15
阅读次数:
333
filebeat是beats工具中的一种,都是用来收集日志文件的,作为监听,可以通过配置随时将结果映射到Elasticsearch,logstash,file或者console(只能配置一种),本篇博...
分类:
其他好文 时间:
2016-09-29 18:16:41
阅读次数:
1142
logstash是一个数据分析软件,主要目的是分析log日志。整一套软件可以当作一个MVC模型,logstash是controller层,Elasticsearch是一个model层,kibana是view层。 首先将数据传给logstash,它将数据进行过滤和格式化(转成JSON格式),然后传给E ...
分类:
其他好文 时间:
2016-09-27 15:07:01
阅读次数:
219
一、安装Elasticsearch下载https://www.elastic.co/guide/en/elasticsearch/reference/current/setup.html二、在MySQL上新建库表(若已有库表可跳过)建库脚本如下:SETFOREIGN_KEY_CHECKS=0;--------------------------------Tablestructureforcontacts------------------------..
分类:
数据库 时间:
2016-09-27 11:54:45
阅读次数:
1179
1. elasticsearch安装 官方下载地址:https://www.elastic.co/downloads/elasticsearch 解压文件 elasticsearch-2.4.0.zip 修改配置文件 配置说明 cluster.name表示es集群的名称,可以自定义一个自己需要的集群 ...
分类:
其他好文 时间:
2016-09-25 14:39:59
阅读次数:
227
http://www.cnblogs.com/smartloli/ 1.概述 今天接着《ElasticSearch实战-日志监控平台》一文来给大家分享后续的学习,在《ElasticSearch实战-日志监控平台》中给大家介绍一个日志监控平台的架构方案,接下来给大家分享如何去搭建部署这样一个平台,给大 ...
分类:
其他好文 时间:
2016-09-25 06:07:36
阅读次数:
130
Elasticsearch是基于Luence实现的一款搜索引擎,支持分布式和集群,并且搜索近实时,主要用于搜索和数据分析 索引 index 可以理解为数据库中的database,存储的是实际数据,因为ES是以Luence为基础的,Luence索引是一种倒排索引结构,不同于数据库中的表面向行数据,索引... ...
分类:
其他好文 时间:
2016-09-24 23:32:21
阅读次数:
263
1. 起步 1. 建demo工程,看文档,做典型demo 2. 资源列表: http://es.xiaoleilu.com/010_Intro/10_Installing_ES.html 3. 启动: elasticsearch.bat 启动完成后 用ARC工具访问 http://localhost... ...
分类:
其他好文 时间:
2016-09-24 20:28:46
阅读次数:
303
es的分布式思想跟现在流行的很多开发技术的分布式一个道理。一个es 搜索服务作为一个集群,集群中存在很多节点,一个节点就是一个搜索服务器。这么多节点中,会按照一定的机制推举出一个 master节点,该节点负责任务的分配,新增节点删除节点等等行为。 先讲分片。 引用: 分片(shard) 是 工作单元 ...
分类:
其他好文 时间:
2016-09-24 16:00:02
阅读次数:
225
elk整体架构图: 一、logstash indexer 配置文件: 注意: 主要是在output插件es部分添加一个index,创建一个索引类型(这也是indexer的名字的来源) input拆件是为了测试才改成标准输入 二、启动es,kibana,logstash indexer 在indexe ...
分类:
其他好文 时间:
2016-09-24 13:33:33
阅读次数:
622