logstash报错现象Troubleparsingjson{:source=>"message",:raw=>"{\"@timestamp\":\"2016-05-30T14:51:27+08:00\",\"host\":\"10.139.48.166\",\"clientip\":\"180.109.110.203\",\"request_method\":\"GET\",\"size\":4286,\"responsetime\":0.000,\"upstreamtime\":\"-..
分类:
Web程序 时间:
2016-05-30 20:05:07
阅读次数:
6714
为了方便直观我们使用Head插件提供的接口进行演示,实际上内部调用的RESTful接口。 RESTful接口URL的格式: http://localhost:9200/<index>/<type>/[<id>] 其中index、type是必须提供的。 id是可选的,不提供es会自动生成。 index ...
分类:
其他好文 时间:
2016-05-30 00:45:59
阅读次数:
201
4 [root@localhost:bin]#curl -XGEt http://10.0.2.15:9200/_cluster/health 5 关闭整个集群 6 [root@localhost:bin]#curl -XPOST http://10.0.2.15:9200/_cluster/nod ...
分类:
其他好文 时间:
2016-05-29 00:38:37
阅读次数:
163
将下面数据写入requests curl -XPOST http://localhost:9200//_bulk --data-binary "@requests"。 ...
分类:
其他好文 时间:
2016-05-28 20:42:29
阅读次数:
385
https://github.com/medcl/elasticsearch-analysis-ikhttps://www.elastic.co/downloads/past-releases/elasticsearch-2-3-2es:2.3.2ik:1.9.2一安装es:wget 'https: ...
分类:
其他好文 时间:
2016-05-28 17:45:51
阅读次数:
370
and符号判断多列存在:{ "filter": { "and": [ { "exists": { "field": "sid" } }, { "exists": { "field": "level" ... ...
分类:
其他好文 时间:
2016-05-28 14:11:44
阅读次数:
244
logstash:https://download.elastic.co/logstash/logstash/logstash-2.2.2.tar.gz elasticsearch:https://download.elasticsearch.org/elasticsearch/release/or ...
分类:
其他好文 时间:
2016-05-27 18:25:13
阅读次数:
191
前言:Elk主要就是3个软件的组合,主要是elasticsearch搜索引擎,Logstash是一个日志收集日志,kibana实时分析进行展示。[关于日志搜集的软件,如:scribe,flume,heka,logstash,chukwa,fluentd,当然rsyslogrsyslog-ng都可以搜集。关于日志手机后存储软件,如:HDFS,Cassandramong..
分类:
系统相关 时间:
2016-05-27 14:58:51
阅读次数:
856
概览一下大数据项目中可以使用的数据存储技术,展示如何使用以及它们的区别。先理解一下NoSQL领域中各种不同的技术:key/value, 列存储,文档型和graph 图存储,然后聚焦于Couchbase 和 ElasticSearch,...
分类:
数据库 时间:
2016-05-27 11:47:45
阅读次数:
260
ElasticSearch是现在技术前沿的大数据引擎,常见的组合有ES+Logstash+Kibana作为一套成熟的日志系统,其中Logstash是ETL工具,Kibana是数据分析展示平台。ES让人惊艳的是他强大的搜索相关能力和灾备策略,ES开放了一些接口供开发者研发自己的插件,ES结合中文分词的 ...
分类:
数据库 时间:
2016-05-27 10:51:30
阅读次数:
1788