写此文章和就是为了记录logstash+elasticsearch+kibana+redis搭建过程。所有程序都是运行在windows 平台下。1. 下载 1.1 logstash, elasticsearch, kinana 从官方站点下载:https://www.elastic.co/ 1......
分类：
其他好文 时间：
2015-12-18 18:53:01
阅读次数：
185
前言本篇主要总结一下MySQL数据库的几种日志，用于日常维护过程中问题解决和性能优化等，稍显基础，日常积累之用。文章的部分内容会将MySQL数据库和SQL Server数据库部分内容做一个对比，非抨击孰优孰劣，只叙述技术，权做学习之用。闲言少叙，直接进入本篇的正题。技术准备宿主于Ubuntu14.0...
分类：
数据库 时间：
2015-12-18 18:17:22
阅读次数：
248
概述做日志分析工作的经常需要跟成千上万的日志条目打交道，为了在庞大的数据量中找到特定模式的数据，常常需要编写很多复杂的正则表达式。例如枚举出日志文件中不包含某个特定字符串的条目，找出不以某个特定字符串打头的条目，等等。使用否定式前瞻正则表达式中有前瞻（Lookahead）和后顾（Lookbehind...
分类：
编程语言 时间：
2015-12-16 09:33:26
阅读次数：
207
1、服务器信息主机名IP地址内存大小
qc-hermes-es-1192.168.0.1032G
qc-hermes-es-2192.168.0.1132G
qc-hermes-es-3192.168.0.1232G2、基础安装1）JDK安装#cd/opt
#wgethttp://xxxx.xxx.xxx.xxx/jdk-8u45-linux-x64.gz
#tarxvzfjdk-8u45-linux-x64.gz
#ln-sjdk1.8.0_45jdk#vim/..
分类：
其他好文 时间：
2015-12-14 23:25:12
阅读次数：
673
在前面两篇文章中记录了使用logstash来收集mysql的慢查询日志，然后通过kibana以web的方式展示出来，但在生产环境中，需求会更复杂一些，而且通过logstash写正则，实在是个费时费劲的事。例如在生产环境中会有要求分析某个时间段mysql或者mongodb的慢查询日志情况；还有I/O吞吐..
分类：
其他好文 时间：
2015-12-14 19:16:44
阅读次数：
297
################################################################### /etc/elasticsearch/elasticsearch.yml## Base configuration for a write heavy cluste...
分类：
其他好文 时间：
2015-12-10 17:03:53
阅读次数：
424
1.概述Elastic Search 是一个基于Lucene构建的开源，分布式搜索引擎。设计用于云计算中，能够达到实时搜索，稳定，可靠，快速，安装使用方便。支持通过HTTP使用JSON进行数据索引2 、环境介绍与安装准备 1、环境说明 MAC OS X 10.10.95 2、安装准备 ...
分类：
其他好文 时间：
2015-12-09 11:44:56
阅读次数：
253
一、Hadoop简介1.1、Hadoop主要进行分布式存储和分布式计算 1.1-1、HDFS：分布式文件系统 1.1-2、MapReduce：并行计算框架1.2、Hadoop用来做什么？ 搭建大型的数据仓库 搜索引擎、日志分析、数据挖掘1.3、优势： 高扩展、低成本、成熟的生态圈二、Had...
分类：
其他好文 时间：
2015-12-08 00:35:26
阅读次数：
221
1. 简介 在上一篇介绍，本文将介绍如何监控 Javc GC 行为，同时涉及一些GUI工具的使用(虽然有些已经很老并不再更新)，监控GC在于判断JVM是否在良好高效地工作并且是否需要投入性能调优(主要包括应用程序优化与JVM参数优化)，关注的数据大概有： 1. Mirror GC频率、持续时间以.....
分类：
编程语言 时间：
2015-12-07 15:53:30
阅读次数：
243
版本filebeat1.0.0-rc2logstash2.0.0-1elasticsearch2.0.0kibana4.2名词解释Elasticsearch存储索引KibanaUIKibanadashboard可视化思维图LogstashInputBeatsplugin收集事件Elasticsearchoutputplugin发送事务Filebeat日志数据托运人shipperTopbeat轻量级服务器监控Packetbeat在..
分类：
其他好文 时间：
2015-12-07 00:45:37
阅读次数：
1053
