年薪200w+的大数据架构师领衔直播，以大数据实时数仓项目为中心，延展4大企业级项目+5大AI应用+6大热门专题，助你开启大数据高薪魔盒。课程优势及特色：1、整体架构：仅关注数仓内部细节-->兼顾数据采集、分布式存储、流计算、建模与实时构建、可视化开发端到端的整体解决方案2、数据采集：人肉管理schema-->统一数据采集解决方案：自动系统化管理schema3、流处理：大量流处理job
分类：
其他好文 时间：
2020-10-19 22:51:11
阅读次数：
21
猫场面试题第 1 套 以下为我为大家整理的猫场面试题第一套，均为笔者自己参加面试或者一些读者分享给我的题目，保证真实和准确性。 1 框架部分 1.1 Spark 提交 job 流程 所谓提交流程，其实就是我们开发人员根据需求写的应用程序通过 Spark 客户端提交给 Spark 运行环境执行计算的流 ...
分类：
其他好文 时间：
2020-10-13 17:19:39
阅读次数：
26
4、子程序回顾练习：declarev_nameemp.ename%type:=‘张三‘;v_jobemp.job%type:=‘游客‘;beginfornin1..3loopinsertintoemp(empno,ename,job,mgr,hiredate,sal,deptno)values(n*10,v_name||n,v_job,8000,to_date(‘2020-9-16‘,‘yyyy-
分类：
数据库 时间：
2020-10-05 22:06:56
阅读次数：
34
一、Jenkins job 简介 Jenkins job 代表一个任务或者项目，通过配置相关的参数和以及工具模块将其配置为一个可执行的任务保存在 Jenkins 平台下，方便不同权限的工作人员重复 build 执行。每次执行后的记录称为一个 build 构建，可以通过查看 build 构建获取结果信 ...
分类：
其他好文 时间：
2020-09-24 21:43:15
阅读次数：
49
在flink集群中提交了一个job报错如下大概看出是没有DataNode，这让人很奇怪 通过jps命令在主节点看到了namenode，但是在DataNode端执行jps没有DataNode [root@devopes ~]# jps 5347 TaskManagerRunner 18788 Name ...
分类：
其他好文 时间：
2020-09-18 17:26:11
阅读次数：
71
本文源码：GitHub·点这里||GitEE·点这里一、大数据简介1、基础概念大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。大数据技术则主要用来解决海量数据的存储和分析。2、特点分析大数据的5V特点（IBM提出）：Volume（大量）、Velocity（高速）、Varie
分类：
其他好文 时间：
2020-09-18 02:32:24
阅读次数：
36
jenkins是一款很好的CI（持续集成）工具，但是在常规化部署时如果碰到很多job需要构建和改变代码分支进行部署时还是挺麻烦的，所以考虑实现自动化。*#--coding:utf-8-*-#pipinstallpython-jenkinsimportjenkinsimportredefGetYaml():yamlPath=os.path.join(os.getcwd(),"Jenkins
分类：
编程语言 时间：
2020-09-18 02:27:58
阅读次数：
49
一、安装 yum install -y ansible 二、密钥授权 ssh-keygen -t rsa注释：-t type指定要创建的密钥类型。 rsa 加密算法 三、模块介绍（https://www.cnblogs.com/mcsiberiawolf/articles/10056777.html ...
分类：
其他好文 时间：
2020-09-18 02:00:30
阅读次数：
37
JWT修改伪造攻击 什么是JWT？ JSON Web Token（JSON Web令牌）是一种跨域验证身份的方案。JWT不加密传输的数据，但能够通过数字签名来验证数据未被篡改（但是做完下面的WebGoat练习后我对这一点表示怀疑）。 JWT分为三部分，头部（Header），声明（Claims），签名 ...
分类：
其他好文 时间：
2020-09-18 00:07:31
阅读次数：
40
k8s资源清单及初识pod资源k8s资源对象工作负载型资源(workload)：Pod,ReplicaSet,Deployment,StatefulSet，DaemonSet,Job,Cronjob，...服务发现及负载均衡资源：Service，Ingress，...配置与存储相关资源：存储卷(Volume)，CSI(容器存储接口)；ConfigMap,Secret,DownwardAPI集群级资
分类：
Web程序 时间：
2020-09-17 22:31:44
阅读次数：
40
