问题描述 zabbix server 平稳运行有一段时间了，但是最近问题却来了，今天早上收到zabbixserver磁盘空间不足的告警。通过查看之后发现是大部分数据是zabbix 库的的数据 在进一步查看发现是history表和history_uint数据太多导致磁盘占用过多。 问题分析 histo ...
分类：
其他好文 时间：
2020-08-24 15:15:48
阅读次数：
54
一，注释规范1，申明shell类型2，程序名称3，版本号4，创建时间5，更改后时间6，作者信息：作者，联系方式7，程序作用，注意事项8，版本更新说明脚本语法检测：bash-ntest.sh脚本命令语法调试并执行：bash-xtest.sh二，变量内置变量：PS1，PATH,HISTORY,SHELL,PID,PPID,$?,$$,UID,HISTSIZE自定义变量变量命名法则：1，驼峰法，2，全大
分类：
系统相关 时间：
2020-08-18 13:21:45
阅读次数：
85
####首先保证Node891或Node811等版本装成功了###### /opt/bigdata/elk/node891 ################ 修改目录权限 #################### [root@vwmaster hadoop]# chown -R root:root ...
分类：
其他好文 时间：
2020-08-17 17:45:14
阅读次数：
70
1.mapReduce 的shuffle 过程 ： https://www.iteye.com/blog/langyu-992916 2.spark streaming : https://www.jianshu.com/p/0691204282ab CAS的理解? https://www.jian ...
分类：
其他好文 时间：
2020-08-13 12:10:50
阅读次数：
53
一、概述 当CDH平台开启kerberos后，需要kdc服务验证通过和kerberos协议验证通过才可以。如果将spark程序部署在CDH 机器上，直接在生成keytab并使用principal登录kerberos即可。 如果当spark应用程序部署在第三方机器上时，还需要处理krb5.conf注册 ...
分类：
其他好文 时间：
2020-08-13 12:07:11
阅读次数：
88
Max Adler (a wealthy benefactor) introduced me to Isaac in 1946 in his Chicago home and played a recorded live performance of Tchaikovsky concerto tha ...
分类：
其他好文 时间：
2020-08-12 16:00:34
阅读次数：
61
1.定义 RDD是只读的记录分区的集合，是一种基于工作集的应用抽象 创建RDD的方式有两种： 从驱动程序中的集合中并行创建 从外部数据集创建 2.底层存储原理 每个RDD的数据以Block的形式存储在多个机器上，对于每个Executor都会启动一个BlockManagerSlave，并且管理一部分B ...
分类：
其他好文 时间：
2020-08-08 00:33:32
阅读次数：
73
一. SparkSQL简介 Spark SQL是Spark用于结构化数据(structured data)处理的Spark模块。 Dremel > Drill(Apache) >Impala(Cloudrea) Presto(Hotonworks) Hive > Shark(对Hive的模仿，区别在 ...
分类：
数据库 时间：
2020-08-07 21:45:52
阅读次数：
79
