通过职位搜索"Python开发"，看下搜索的结果： https://www.zhipin.com/job_detail/?query=python开发&city=101020100&industry=&position= 按F12，使用开发者工具查看下html的结构： 先获取所有的class="jo ...
分类：
编程语言 时间：
2020-09-17 22:29:36
阅读次数：
29
TPL - Task Parallel Library为我们提供了Task相关的api，供我们非常方便的编写并行代码，而不用自己操作底层的Thread类。使用Task的优势是显而易见的： 提供返回值 异常捕获 节省Context Switch造成的开销 另一个Task带来的优势就是不再需要通过阻塞线 ...
分类：
其他好文 时间：
2020-09-17 21:21:09
阅读次数：
43
服务类的Pod容器：RC、RS、DS、Deployment.（Pod内运行的服务，要持续运行）工作类的Pod容器：Job--->执行一次，或者批量执行处理程序，完成之退出容器。//举个栗子kind:JobapiVersion:batch/v1metadata:name:test-jobspec:template:metadata:name:test-jobspec:containers:-n
分类：
其他好文 时间：
2020-09-17 18:40:08
阅读次数：
35
题目描述： This is the first problem for test. Since all we know the ASCII code, your job is simple: Input numbers and output corresponding messages. 输入： T ...
分类：
其他好文 时间：
2020-09-17 17:23:30
阅读次数：
51
1 开启 Map 输出阶段压缩(中间压缩) 开启 map 输出阶段压缩可以减少 job 中 map 和 Reduce task 间数据传输量。具体配置如下： 步骤1: 开启 Hive 中间传输数据压缩功能 map 任务和 reduce 任务之间的数据的压缩. hive.exec.compress.i ...
分类：
其他好文 时间：
2020-09-17 17:04:51
阅读次数：
30
我们可以通过zip()并行迭代，zip()函数在短序列“用完”时就会停止 【操作】测试zip并行迭代 name = ['张三', '李四', '王麻子'] age = [18, 19, 21] job = ['学生', '程序员', '公务员'] for i, j, k in zip(name, a ...
分类：
其他好文 时间：
2020-09-16 12:27:41
阅读次数：
35
Gitlab-Runner共享服务器使用及配置说明 Gitlab-Runner自动构建服务器搭建1 Gitlab-Runner自动构建服务器搭建2 上面两个地址是搭建私有Gitlab-Runner服务器的说明；这篇文章将向大家介绍gitlab仓库及共享gitlab-runner的ci/cd配置与使用 ...
分类：
其他好文 时间：
2020-09-11 14:14:57
阅读次数：
28
Hive是大数据领域常用的组件之一，主要用于大数据离线数仓的运算，关于Hive的性能调优在日常工作和面试中是经常涉及的一个点，因此掌握一些Hive调优是必不可少的一项技能。影响Hive效率的主要因素有数据倾斜、数据冗余、job的IO以及不同底层引擎配置情况和Hive本身参数和HiveSQL的执行等。本文主要从建表配置参数方面对Hive优化进行讲解
分类：
其他好文 时间：
2020-09-04 16:58:58
阅读次数：
42
介绍XXL-JOB是一个分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并接入多家公司线上产品线，开箱即用。主要特性1、简单：支持通过Web页面对任务进行CRUD操作，操作简单，一分钟上手；2、动态：支持动态修改任务状态、启动/停止任务，以及终止运行中任务，即时生效；3、调度中心HA（中心式）：调度采用中心式设计，“调度中心”自研调度组件并支持集群部署，可保证
分类：
数据库 时间：
2020-09-03 16:52:28
阅读次数：
84
Job：控制Pod完成工作 Begin： kubectl explain job.spec Job基础Yaml apiVersion: batch/v1 kind: Job metadata: name: batch-job namespace: controller-test spec: temp ...
分类：
其他好文 时间：
2020-08-20 19:27:01
阅读次数：
140
