这是一个用来处理日志的库，它的设计思路来自于 database/sql，目前支持的引擎有 file、console、net、smtp，可以通过如下方式进行安装： 通用方式 首先引入包： 然后添加输出引擎（log 支持同时输出到多个引擎），这里我们以 console 为例，第一个参数是引擎名（包括：c ...
分类：
其他好文 时间：
2018-12-16 19:29:00
阅读次数：
190
参考：What are the concepts of “kernel ring buffer”, “user level”, “log level”? Ring Buffer 原始问题 个人补充：runlevel是指SysV中用于确定OS运行环境的一种技术。不过在CentOS 7.X以后就被淘汰了 ...
分类：
系统相关 时间：
2018-12-13 01:10:12
阅读次数：
244
ELK日志分析平台 一、ELK介绍 ELK是三个开源软件的缩写，分别为：Elasticsearch 、 Logstash以及Kibana，都是开源软件，新增一个beats，（轻量级日志处理工具Agent） ELK是三个开源软件的缩写，分别为：Elasticsearch 、 Logstash以及Kib ...
分类：
其他好文 时间：
2018-12-12 23:54:39
阅读次数：
348
很多时候，定义清楚问题比解决问题更难。 什么是MapReduce？ 它不是一个产品，而是一种解决问题的思路，它有多个工程实现，Google在论文中也给出了它自己的工程架构实现。 MapReduce这个编程模型解决什么问题？ 能够用分治法解决的问题，例如： 网页抓取 日志处理 索引倒排 查询请求汇总 ...
分类：
其他好文 时间：
2018-12-12 12:55:03
阅读次数：
185
1、apache推出的开源免费日志处理的类库 2、为什么需要日志？？ 2.1 在项目中编写system.out.println();输出到控制台，当项目发布到tomcat后，没有控制台（在命令界面能看见），不容易观察一些输出结果。。 2.2 log4j 作用，不仅能把内容输出到控制台，还能把内容输出 ...
分类：
其他好文 时间：
2018-12-04 14:37:54
阅读次数：
218
1.mq解决的问题 + 系统异步处理 + 应用解耦 + 流量削峰 + 日志处理 + 消息通信 2.消息中间件的2中模型 2.1 Point to Point(P2P) / 点对点 / 类比：送快递 特点: + 一个消费生产者必须有一个消息消费者。一对一的关系 + 一个消息发送到queue中，如果mq ...
分类：
其他好文 时间：
2018-12-02 01:20:48
阅读次数：
189
开发任何项目，都离不开日志，配好自己的项目日志输出，往往是开发项目的前提。在golang中，seelog应该是比较有名的日志处理包了，功能非常强大，seelog官方文档 一、seelog主要功能下面我们看看seelog有啥强大 设置不同级别的日志；输出到终端或文件；过滤指定级别日志；定义多种不同的日 ...
分类：
其他好文 时间：
2018-12-01 11:15:13
阅读次数：
318
flask有个很人性化的处理就是 你的错误的输出是可以通过错误日志来自定义 ，让你输入的错误不再是“大黄页”， 通过 errorhandler()来装饰函数之后你的所有的输入错误的函数你都会进入这个函数中，然后我没可以自定义错误日志的输出 errorhandler("报错响应码") register ...
分类：
其他好文 时间：
2018-11-29 01:29:43
阅读次数：
501
S3日志拉取这里是S3插件的官方文档https://github.com/fluent/fluent-plugin-s3使用前，我们需要安装好S3插件我们因为从AWS的S3里拉取日志，需要在AWS上做一些配置：1.我们需要创建一个SQS的队列，然后授予每个桶SQS的权限。2.还需要给每个桶添加事件通知，这样S3桶一有更新，就会把更新扔到SQS里面。<source>@types3aws_
分类：
其他好文 时间：
2018-11-14 19:08:05
阅读次数：
264
主机安装td-agentcurl-Lhttps://toolbelt.treasuredata.com/sh/install-redhat-td-agent2.sh|shyumremove应用名docker命令总结docker安装fluentd的官方文档https://hub.docker.com/r/fluent/fluentd执行这条命令拉取dockerimages，并运行dockerrun-
分类：
其他好文 时间：
2018-11-14 19:02:53
阅读次数：
734
