Log Parser（微软网站下载）是微软公司出品的日志分析工具，它功能强大，使用简单，可以分析基于文本的日志文件、XML 文件、CSV（逗号分隔符）文件，以及操作系统的事件日志、注册表、文件系统、Active Directory。它可以像使用 SQL 语句一样查询分析这些数据，甚至可以把分析结果以...
分类：
其他好文 时间：
2014-10-21 15:14:00
阅读次数：
325
每天把日志分析结果通过邮件发送给boss和研发，是不是省去自己写脚本的时间了？下面是goaccess安装步骤，我也是从其他地方抓取的，安装很简单，网上一搜一大把安装GoAccessRedHat或centos，使用yum：yuminstallgoaccessGoAccess有两种使用方法，一种是直接在控制台显示和操作。..
分类：
数据库 时间：
2014-10-20 17:32:15
阅读次数：
343
Logstash+ElasticSearch+Kibana3架构日志系统一，分析系统简介日志监控和分析在保障业务稳定运行时，起到了很重要的作用，不过一般情况下日志都分散在各个生产服务器，且开发人员无法登陆生产服务器，这时候就需要一个集中式的日志收集装置，对日志中的关键字进行监控，触发异..
分类：
其他好文 时间：
2014-10-20 15:21:50
阅读次数：
388
安装和使用ElasticsearchElasticsearch是开源搜索平台的新成员，实时数据分析的神器，发展迅猛，基于Lucene、RESTful、分布式、面向云计算设计、实时搜索、全文搜索、稳定、高可靠、可扩展、安装＋使用方便，介绍都说的很好听，好不好用拿出来遛一遛。做了个简单测试，在两台完..
分类：
其他好文 时间：
2014-10-17 15:45:22
阅读次数：
222
Hadoop日志分析系统启动脚本
#!/bin/bash
#Flume日志数据的根目录
root_path=/flume
#Mapreduce处理后的数据目录
process_path=/process
#hive分区时间
partition=`date "+%Y-%m-%d"`
#获取前一小时的时间:/YYYY-MM-DD/HH
file_path=`date -d "1 hour ...
分类：
其他好文 时间：
2014-10-16 19:41:13
阅读次数：
202
elasticsearch的配置文件位于%ES_HOME%/config/elasticsearch.yml文件中。。所有的配置都可以使用环境变量，例如：node.rack: ${RACK_ENV_VAR}，表示环境变量中有一个RACK_ENV_VAR变量。下面列举一下elasticsearch的可...
分类：
其他好文 时间：
2014-10-16 17:18:32
阅读次数：
281
ElasticSearch是一个基于Lucene构建的开源，分布式，RESTful搜索引擎。设计用于云计算中，能够达到实时搜索，稳定，可靠，快速，安装使用方便。支持通过HTTP使用JSON进行数据索引。
我们建立一个网站或应用程序，并要添加搜索功能，令我们受打击的是：搜索工作是很难的。我们希望我们...
分类：
其他好文 时间：
2014-10-16 15:55:32
阅读次数：
181
1. elasticsearch-head插件的安装，非常好的插件elasticsearch-head是一个elasticsearch的集群管理工具，它是完全由html5编写的独立网页程序，你可以通过插件把它集成到es。$ES_HOME/bin/plugin -install mobz/elasti...
分类：
其他好文 时间：
2014-10-15 19:42:11
阅读次数：
205
一、安装，运行1. 检查java的版本环境Elasticsearch依赖Java，在书写本文档的时候，推荐使用Oracle JDK 1.8.0_20 或 1.7.0_55以后的版本。在安装Elasticsearch之前，你可以通过以下命令来检查你的Java版本。java -versionecho $...
分类：
其他好文 时间：
2014-10-15 18:52:11
阅读次数：
210
1、首先将如下数据提交到ES中建立索引
{"number":32768,"singer":"杨坤","size":"5109132","song":"今夜二十岁","tag":"中国好声音","timelen":319}
{"number":32769,"singer":"汪峰","size":"6001697","song":"我爱你中国","tag":"中国好声音","timelen":3...
分类：
其他好文 时间：
2014-10-14 20:48:29
阅读次数：
127
