一、logstash结合kafka收集系统日志和nginx日志 架构图： 环境准备： A主机：kibana、elasticsearch，有条件可以将两个服务器分开：192.168.7.100 B主机：logstash主机:192.168.7.101/nginx服务器也在此主机上 C主机：logsta ...
分类：
其他好文 时间：
2020-03-23 09:48:02
阅读次数：
54
操作系统 Centos 7.6 , Ubuntu-19.10 硬件配置(推荐) CPU / 内存 : 2核 / 4GB 安装版本 kibana 7.6.1 https://artifacts.elastic.co/downloads/kibana/kibana-7.6.1-linux-x86_64. ...
分类：
其他好文 时间：
2020-03-20 11:14:03
阅读次数：
105
spring boot 项目想要连接hive库的时候 需要导入两个jar包hadoop-common-2.5.1.jar和hive-jdbc-1.2.1 在导入的之后原来的项目启动报错具体如下 org.springframework.beans.factory.UnsatisfiedDependen ...
分类：
编程语言 时间：
2020-03-20 10:54:27
阅读次数：
222
1.打开kibana 修改索引属性 PUT bwbdindex/_settings{ "index":{ "max_result_window":500000000 }} ok一次性5亿条数据都能拿出来 不过这么多数据 得传多久？ ...
分类：
其他好文 时间：
2020-03-20 10:38:12
阅读次数：
741
启动报错提示如图： localhost: failed to launch: nice -n 0 /home/chan/spark/spark-2.4.3-bin-hadoop2.7/bin/spark-class org.apache.spark.deploy.worker.Worker --we ...
分类：
Web程序 时间：
2020-03-18 20:21:37
阅读次数：
223
1.安装之前首先要安装jdk环境，确保系统内有最新版本的jdk，具体安装与环境配置的方法我就不说了，在linux或者是mac下如果通过包管理安装的话基本上不需要什么配置。 2.访问es官网，https://www.elastic.co/cn/downloads，根据页面内的提示和选项下载包，运行即可 ...
分类：
其他好文 时间：
2020-03-17 14:20:26
阅读次数：
51
filebeat.inputs: - type: docker containers.ids: - 'b77cea34ab4512727a1ae5e14073640c286dcd13d030cb114a9e6befead05a3b' setup.kibana: hosts: ["xx.xx.xxx. ...
分类：
其他好文 时间：
2020-03-17 10:16:39
阅读次数：
164
注意: 不能用winrar或7zip等普通解压软件鼠标拖入直接替换, 否则启动报错: Caused by: java.lang.IllegalStateException: Unable to open nested entry 'BOOT-INF/lib/**.jar'. It has been ...
分类：
编程语言 时间：
2020-03-16 23:48:55
阅读次数：
73
[toc] Lucene是目前最为流行的开源全文搜索引擎工具包，提供了完整的查询引擎和索引引擎，部分文本分析引擎。 我们平时使用kibana、阿里云的日志查询或者其他一些lucene二次开发的产品，几乎都支持lucene语法。 下面给大家演示各种查询方式，更多请参考 "Apache Lucene Q ...
分类：
Web程序 时间：
2020-03-16 09:25:19
阅读次数：
68
1.安装jdk yum install java-1.8.0-openjdk -y 2.配置yum源 vim /etc/yum.repos.d/logstash.repo [logstash-7.x]name=Elastic repository for 7.x packagesbaseurl=ht ...
分类：
其他好文 时间：
2020-03-11 23:24:32
阅读次数：
76
