ELK日志分析系统概述ELK是Elasticsearch、Logstash、Kibana的简称Elasticsearch是实时全文搜索和分析引擎Logstash是一个用来搜集、分析、过滤日志的工具Kibana是一个基于Web的图形界面,用于搜索、分析和可视化存储在Elasticsearch指标中的日志数据日志服务器提高安全性集中存放日志缺陷:对日志的分析困难ELK日志分析系统收集数据:Logsta
分类:
其他好文 时间:
2019-12-19 09:46:30
阅读次数:
340
第1章 Elasticsearch安装部署 1.1 下载软件包并创建工作目录 程序下载地址:https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.5.0-linux-x86_64.tar.gz 下载时间过长,建议登录 ...
分类:
其他好文 时间:
2019-12-18 10:57:27
阅读次数:
90
1、jps 查看应用进程2、jinfo -flags pid 查看曾经赋值的一些参数3、jstat 查看类装载信息jstat -class PID 1000 10 查看某个java进程的类装载信息,每1000毫秒输出一次,共输出10次查看垃圾收集信息jstat -gc PID 1000 104、js ...
分类:
其他好文 时间:
2019-12-18 00:06:56
阅读次数:
280
一、Hadoop概述 1、Hadoop名字是由Hadoop项目作者的孩子给一个棕黄色的大象样子的填充玩具的命名,Hadoop是Apache开源的分布式存储+分布式计算平台。Hadoop能搭建大型数据仓库、PB级数据的存储、处理、分析、统计等业务,如搜索引擎、日志分析、商业智能、数据挖掘 2、狭义Ha ...
分类:
其他好文 时间:
2019-12-16 19:22:48
阅读次数:
100
ELK 是现阶段众多企业单位都在使用的一种日志分析系统,它能够方便的为我们收集你想要的日志并且展示出来 ELK是Elasticsearch、Logstash、Kibana的简称,这三者都是开源软件,通常配合使用。 1. Elasticsearch -->存储数据 是一个实时的分布式搜索和分析引擎,它 ...
分类:
其他好文 时间:
2019-12-16 10:02:25
阅读次数:
1383
EFK 是ELK 日志分析的一个变种,能够更好的来实现日志分析。 首先我们先准备3台 centos7的服务器,在给他们调成2核2G的状态打开。 软件 版本号 zookeeper 3.4.14 Kafka 2.2.0 logstash 6.6.0 elasticsearch 6.6.2 jdk jdk ...
分类:
其他好文 时间:
2019-12-16 10:01:56
阅读次数:
88
写在前面 在我初次接触MongoDB的时候,是为了做一个监控系统和日志分析系统。当时在用Java操作MongoDB数据里的数据的时候,都是在网上查找Demo示例然后完成的功能,相信大家也同样的体会,网上大都是这种一个入门的小Demo,很少有深入讲解的。功能调通后,自己琢磨效率方面的问题,便开始自己的 ...
分类:
编程语言 时间:
2019-12-15 23:40:24
阅读次数:
438
nginx日志默认不会记录post数据 在nginx配置文件的http节 log_format 日志格式标识 [escape=json] 日志格式 比如:日志格式标识设置为main,添加escape=json以便中文正确显示(注意,escape=json 需要 nginx 1.11.8 以上版本才支 ...
分类:
数据库 时间:
2019-12-14 11:41:16
阅读次数:
211
搭建办公环境ElasticSearch 日志分析系统
分类:
其他好文 时间:
2019-12-11 21:37:16
阅读次数:
261
AWK是一个强大的文本分析工具,算是Linux系统特别有用的命令了,在日志分析、文件内容分析中扮演特别重要的角色。 AWK说明 简单来说awk就是把文件逐行的读入,以指定的分隔符将每行分割,分割后的部分再进行各种分析处理。 先看下AWK的命令的说明 | 内置变量 | 说明 | | | | | $0 ...
分类:
系统相关 时间:
2019-12-07 10:49:52
阅读次数:
123