本课程针对企业不同数据规模技术方案进行讲解,紧贴企业热门需求,深入讲解企业级大数据技术的数据存储技术、数据采集技术、数据处理技术、任务调度技术等;课程针对知识点进行企业级案例式教学,理论结合实战,从0到1构建大数据生态技术的方方面面,内容涵盖大数据平台、Spark、Flink、OLAP等核心技术;用真实的企业级实时数仓项目、离线数仓项目、PB级实时用户行为分析系统、千亿级实时广告系统等多个大型项目
分类:
其他好文 时间:
2020-06-22 19:15:45
阅读次数:
50
elk系统logstash日志处理端使用lvs做的负载均衡,端口监控发现logstash节点因为最大文件数到达限制挂了一台,lvs不知道后端的logstash挂了。看告警虚拟IP恢复是因为转发到正常的节点了,端口监控后续就一直告警波动恢复告警--!,因为lvs没有移除故障节点,处理不及时,丢的数据就多了。这边用利用ssh免密做的监控,后端RealServer不能禁止lvs禁止访问22端口,lvs定
分类:
其他好文 时间:
2020-06-22 19:11:06
阅读次数:
82
1. kernel_top_show //显示cpu top usage, 类似于用top命令看到的信息。 2. print_active_wakeup_sources //显示active wakeup sources, 也就是kernel层的持锁,能明确知道是什么锁block了系统进入suspe ...
分类:
其他好文 时间:
2020-06-22 18:44:09
阅读次数:
119
前言 在之前介绍过了Shiro之后,有好多粉丝问SpringSecurity在Spring Boot中怎么集成。这个系列我们就和大家分享下有关这方面的知识。 本节大纲 一、什么是SpringSecurity? 二、常用安全框架 一、什么是Spring Security? SpringSecurity ...
分类:
编程语言 时间:
2020-06-22 15:35:14
阅读次数:
63
查看K8S的api地址的命令如下(最好在K8s集群的master上执行这条命令,因为如果在node节点上执行该命令有可能会获取旧的api地址)
Supervisor(http://supervisord.org/)C/S架构的进程控制系统,是用Python开发的一个client/server服务,是Linux/Unix系统下的一个进程管理工具,基于linux操作系统的一款服务器管理工具,不支持Windows系统。 用以监控服务器的运行,发现 ...
分类:
系统相关 时间:
2020-06-22 14:56:57
阅读次数:
92
nmon开源性能监控工具,用于监控linux系统的资源消耗信息,并能把结果输出到文件中,然后通过nmon_analyser工具产生数据文件与图形化结果。 一、安装软件 下载nmon安装包:http://nmon.sourceforge.net/pmwiki.php?n=Site.Download选择 ...
分类:
系统相关 时间:
2020-06-22 14:36:48
阅读次数:
84
现如今,一方面是工业互联网和 5G 齐头并进的时代,另一方面是国家新基建如火如荼的建设实施,可视化系统的搭建可以承载更多数据的监管,设施的完善就会伴随着设施的监管和维护,监控平台就能实现更多的事情。从宏观的角度来看,物流作为社会最低层的基础设施,既连接生产与消费,又是城市支柱产业与优势产业的保障。一... ...
分类:
其他好文 时间:
2020-06-22 01:46:32
阅读次数:
51
1、下载node_exporter https://github.com/prometheus/node_exporter/releases 2、启动node_exporter nohup ./node_exporter & > nohup.out & 3、prometheus 配置 - job_n ...
分类:
其他好文 时间:
2020-06-21 23:28:21
阅读次数:
46