本文源码：GitHub·点这里||GitEE·点这里一、大数据简介1、基础概念大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。大数据技术则主要用来解决海量数据的存储和分析。2、特点分析大数据的5V特点（IBM提出）：Volume（大量）、Velocity（高速）、Varie
分类：
其他好文 时间：
2020-09-18 02:32:24
阅读次数：
36
jenkins是一款很好的CI（持续集成）工具，但是在常规化部署时如果碰到很多job需要构建和改变代码分支进行部署时还是挺麻烦的，所以考虑实现自动化。*#--coding:utf-8-*-#pipinstallpython-jenkinsimportjenkinsimportredefGetYaml():yamlPath=os.path.join(os.getcwd(),"Jenkins
分类：
编程语言 时间：
2020-09-18 02:27:58
阅读次数：
49
一、安装 yum install -y ansible 二、密钥授权 ssh-keygen -t rsa注释：-t type指定要创建的密钥类型。 rsa 加密算法 三、模块介绍（https://www.cnblogs.com/mcsiberiawolf/articles/10056777.html ...
分类：
其他好文 时间：
2020-09-18 02:00:30
阅读次数：
37
JWT修改伪造攻击 什么是JWT？ JSON Web Token（JSON Web令牌）是一种跨域验证身份的方案。JWT不加密传输的数据，但能够通过数字签名来验证数据未被篡改（但是做完下面的WebGoat练习后我对这一点表示怀疑）。 JWT分为三部分，头部（Header），声明（Claims），签名 ...
分类：
其他好文 时间：
2020-09-18 00:07:31
阅读次数：
40
k8s资源清单及初识pod资源k8s资源对象工作负载型资源(workload)：Pod,ReplicaSet,Deployment,StatefulSet，DaemonSet,Job,Cronjob，...服务发现及负载均衡资源：Service，Ingress，...配置与存储相关资源：存储卷(Volume)，CSI(容器存储接口)；ConfigMap,Secret,DownwardAPI集群级资
分类：
Web程序 时间：
2020-09-17 22:31:44
阅读次数：
40
通过职位搜索"Python开发"，看下搜索的结果： https://www.zhipin.com/job_detail/?query=python开发&city=101020100&industry=&position= 按F12，使用开发者工具查看下html的结构： 先获取所有的class="jo ...
分类：
编程语言 时间：
2020-09-17 22:29:36
阅读次数：
29
服务类的Pod容器：RC、RS、DS、Deployment.（Pod内运行的服务，要持续运行）工作类的Pod容器：Job--->执行一次，或者批量执行处理程序，完成之退出容器。//举个栗子kind:JobapiVersion:batch/v1metadata:name:test-jobspec:template:metadata:name:test-jobspec:containers:-n
分类：
其他好文 时间：
2020-09-17 18:40:08
阅读次数：
35
题目描述： This is the first problem for test. Since all we know the ASCII code, your job is simple: Input numbers and output corresponding messages. 输入： T ...
分类：
其他好文 时间：
2020-09-17 17:23:30
阅读次数：
51
1 开启 Map 输出阶段压缩(中间压缩) 开启 map 输出阶段压缩可以减少 job 中 map 和 Reduce task 间数据传输量。具体配置如下： 步骤1: 开启 Hive 中间传输数据压缩功能 map 任务和 reduce 任务之间的数据的压缩. hive.exec.compress.i ...
分类：
其他好文 时间：
2020-09-17 17:04:51
阅读次数：
30
我们可以通过zip()并行迭代，zip()函数在短序列“用完”时就会停止 【操作】测试zip并行迭代 name = ['张三', '李四', '王麻子'] age = [18, 19, 21] job = ['学生', '程序员', '公务员'] for i, j, k in zip(name, a ...
分类：
其他好文 时间：
2020-09-16 12:27:41
阅读次数：
35
