ELK 日志分析 1. 为什么用到 ELK 一般我们需要进行日志分析场景:直接在日志文件中 grep、 awk 就可以获得自己想要的信息。但在规模较大的场景中,此方法效率低下,面临问题包括日志量太大如何归档、文本搜索太慢怎么办、如何多维度查询。需要集中化的日志管理,所有服务器上的日志收集汇总。常见解 ...
分类:
其他好文 时间:
2019-12-02 13:12:46
阅读次数:
156
最近在网上看了不少有关CI/CD的文章,其实基本是雷同的,且内容也不是非常完善。确实,当前持续集成用到的开源工具无非还是Git、Jenkins、Ansible(Fabric)这些,不同的应该是各公司的技术框架差异,发布审核流程不同,从而使配置细节也有较大不同。接下来我将陆续分享一系列这些年(2014-至今)我们一直在用的一套发布流程,欢迎共同探讨。我们一直沿用的一套流程如下:0、在公司内部搭建gi
分类:
其他好文 时间:
2019-12-02 09:20:34
阅读次数:
402
A tényleges Birkenstock boston azt a jó funkciót kínálja, amelyet a nedves környezetben él? sportolók választhatnak: elképeszt? vonóer?je. Ez a számom ...
分类:
其他好文 时间:
2019-12-01 11:54:40
阅读次数:
117
一 metricbeat仪表盘 1.1 安装metricbeat仪表盘 可以将metricbeat数据在kibana中展示 [root@node4 ~]# cd /usr/local/metricbeat/ [root@node4 metricbeat]# grep -Ev "^$|[#;]" me ...
分类:
其他好文 时间:
2019-11-30 13:44:20
阅读次数:
123
一 简介 Kiana是一款开源的数据分析和可视化平台,它是 Elastic Stack成员之一,设计用于和 Elasticsearch协作。您可以使用 Kiana对 Elasticsearch索引中的数据进行搜索、查看、交互操作。您可以很方便的利用图表、表格及地图对数据进行多元化的分析和呈现 基本内 ...
分类:
其他好文 时间:
2019-11-29 22:17:06
阅读次数:
132
Elasticsearch+logstash+kibana
分类:
其他好文 时间:
2019-11-28 15:08:19
阅读次数:
64
收集系统其它服务日志,在客户端node1 上操作,示例以openstack-nova 服务的日志为例: 1.先修改配置文件 /etc/rsyslog.conf,完整内容如下: [root@node1 ~]# egrep -v '^#|^$' /etc/rsyslog.conf $ModLoad im ...
分类:
其他好文 时间:
2019-11-28 13:32:01
阅读次数:
169
Kibana数据可视化 1,3.1使用logstash导入数据的问题 会出现错误提示: 错误原因是创建的mapping为accident,但是默认覆盖的mapping默认为doc,与之前创建的不一样; 本机ELK版本为6.2.4;logstash对于处理过的数据不会重复处理,需要删除data文件夹里 ...
分类:
其他好文 时间:
2019-11-25 13:46:42
阅读次数:
102
两者都是一个分布式架构 kafka 具有较高的吞吐量,rabbimq 吞吐量较小 rabbitmq 的可靠性更好,确认机制(生产者和 exchange,消费者和队列),支持事务,但会造成阻塞,委托(添加回调来处理发送失败的消息)和备份交换器(将发送失败的消息存下来后面再处理)机制 kafka 常用于 ...
分类:
其他好文 时间:
2019-11-25 13:22:45
阅读次数:
101
Tags:k8s环境下的容器日志收集K8S环境下面如何收集应用日志在本文中重点讲一下K8S容器环境中如何收集容器的日志;1.容器日志收集方案的选择:??在K8S集群中,容器的日志收集方案一般有三种;第一种方案是通过在每一个k8s节点安装日志收集客户端软件,比如fluentd。这种方案不好的一点是应用的日志必须输出到标准输出,并且是通过在每一台计算节点的/var/log/co
分类:
其他好文 时间:
2019-11-24 09:50:35
阅读次数:
77