码迷,mamicode.com
首页 >  
搜索关键字:elk kafka rsyslog flume    ( 6983个结果
rsyslog server 和loganalyzer(图形日志)
rsyslog:日志:历史事件的相当记录记录的内容:事件发生的时间、事件内容日志级别:事件的关键性程序,loglevelLinux:应用程序,内核syslogd为系统记录日志的程序klogd为内核记录日志的程序程序包:syslog(centos5之前的版本)-->rsyslogrsyslog:多线程;基于此些UDP, TC..
分类:其他好文   时间:2015-05-17 02:15:37    阅读次数:211
rsyslog服务器实现通过loganalyzer管理
简单罗列基础命令,只分享我的想法!rsyslog简述(1)关于rsyslog介绍rsyslog服务是多线程的日志管理工具,因为是多线程所以比之前的syslog处理事务的能力更加出色,支持SSL/TCP/UDP/TLS/RELP,并且日志可以记录在MySQL/PGSQL/Oracle等关系库中。rsyslog是CentOS提供的,主要是..
分类:其他好文   时间:2015-05-16 18:40:15    阅读次数:215
Flume MemoryChannel ChannelFullException
先贴上异常信息 1 08 May 2015 17:55:23,751 WARN [New I/O worker #1] (org.apache.flume.source.AvroSource.append:350) - Avro source r1: Unable to process eve...
分类:Web程序   时间:2015-05-15 17:09:08    阅读次数:437
loganalyzer的安装使用和rsyslog server的创建
loganalyzer的安装使用和rsyslogserver的创建一、为什么要建rsyslog当我们有多台服务器需要记录日志时,分开的日志记录不便于分析,这时就需要用到集中式存储与分析。rsyslog支持把日志存储于mysql中,便于集中式存储与分析。我们这里是从最基础的开始做起:先是建立rsyslog与m..
分类:其他好文   时间:2015-05-15 15:59:48    阅读次数:339
kafka安装及常用命令
kafka是一个开源的分布式消息队列他提供可靠的集群容错机制,并保证故障切换时的数据完整性。下面简单记录一下安装步骤和常用命令。1、安装http://kafka.apache.org/documentation.html下载压缩包并解压可以解压到 /usr/local/kafka2、配置vim co...
分类:其他好文   时间:2015-05-14 23:39:51    阅读次数:20804
kafka 集群部署 多机多broker模式
kafka集群部署多机多broker模式环境IP:172.16.1.35zookeeperkafka172.16.1.36zookeeperkafka172.16.1.37zookeeperkafka开放端口2181288838889092编辑server.properties文件(以下为172.16.1.35的配置)#在默认的配置上,我只修改了4个地方。broker.id=三个主机172.16.1.35,172.16..
分类:其他好文   时间:2015-05-14 14:29:56    阅读次数:261
rsyslog日志系统
1rsyslog日志系统linux上,应用程序和内核都需要记录日志。负责记录应用程序的是syslogd,记录内核的则是klogd。centos5上使用的是syslog,但由于其功能过于薄弱和单一,在centos6和7上被rsyslog所取代。事实上rsyslog是一个服务。日志:历史事件的相关记录。早期时就有航海日..
分类:其他好文   时间:2015-05-14 06:24:33    阅读次数:398
lamp+loganalyzer+rsyslog server部署日志服务器
lamp+loganalyzer+rsyslogserver部署日志服务器网络环境日志服务器(lamp+loganalyzer+rsyslog)IP:172.16.6.63/16主机名:log.com系统发行本:CentOSrelease6.6(Final)loganalyzer版本:loganalyzer-3.6.5.tar.gzlampapcherpm:rpmhttpd-2.2.15-39.el6.centos.x86_64phprpm:php-gd-5..
分类:其他好文   时间:2015-05-13 20:02:14    阅读次数:390
【原创】kafka controller源代码分析(一)
Kafka集群中的一个broker会被作为controller负责管理分区和副本的状态以及执行类似于重分配分区之类的管理任务。如果当前的controller失败了,会从剩下的broker中选出新的controller。一、PartitionLeaderSelector.scala顾名思义就是为分区选...
分类:其他好文   时间:2015-05-13 18:42:48    阅读次数:223
haproxy的日志记录到指定位置
[root@robin~]#cat/etc/rsyslog.conf######以下的并不是全部的rsyslog的内容,只是其中比较重要的部分。#ProvidesUDPsyslogreception$ModLoadimudp$UDPServerRun514#允许514端口接收使用UDP协议转发过来的日志(去掉注释表示开启)#ProvidesTCPsyslogreception#$ModLoadimtcp#$In..
分类:其他好文   时间:2015-05-13 17:11:41    阅读次数:238
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!