环境说明: 我在master-jenkins配置了2个节点,分别是mac_10.1.5.94和mac_10.1.71.51 关于jenkins集群管理(节点管理),参照:[Jenkins]集群 节点管理| |分布式打包 python-jenkins官方文档 下面是几个python-jenkins提供 ...
分类：
移动开发 时间：
2019-12-30 11:50:18
阅读次数：
92
本文从数据倾斜的危害、现象、原因等方面，由浅入深阐述Spark数据倾斜及其解决方案。 ...
分类：
其他好文 时间：
2019-12-30 11:24:02
阅读次数：
99
Kettle是一款国外开源的ETL工具，纯java编写，可以在Windows、Linux、Unix上运行，数据抽取高效稳定。 它允许你管理来自不同数据库的数据，通过提供一个图形化的用户环境来描述你想做什么，而不是你想怎么做。 Kettle中有两种脚本文件，transformation和job，tra ...
Label（标签）我们为什么要使用label呢？当相同类型的资源对象越来越多，为了更好的管理，才按照标签分为一个小组，为的是提升资源的管理效率。lable是附着到object上（例如pod）的键值对。可以在创建object的时候指定，也可以在object创建后随时指定。Labels的值对系统本身并没有什么含义，只是对用户才有意义。"labels":{"key1":"value1","key2":"
分类：
其他好文 时间：
2019-12-29 09:21:13
阅读次数：
68
scrapy是爬虫中封装好的一个明星框架，具有的功能： 高性能的持久化存储 异步的数据下载 高性能数据解析，分布式 scrapy框架基本使用 环境安装 mac or linux pip install scrapy windows pip install wheel 下载twisted，下载地址为 ...
分类：
其他好文 时间：
2019-12-28 21:17:25
阅读次数：
90
TCP 端口（静态端口） 端口类型端口号注释 TCP 0 Reserved TCP 1 TCP Port Service Multiplexer TCP 2 Death TCP 5 Remote Job Entry,yoyo TCP 7 Echo TCP 11 Skun TCP 12 Bomber ...
分类：
其他好文 时间：
2019-12-28 21:08:24
阅读次数：
898
1.安装部署Prometheus 安装参考：https://www.cnblogs.com/caoweixiong/p/12111035.html 配置prometheus.yml，添加canal的job，示例： - job_name: 'canal' static_configs: - targe ...
分类：
其他好文 时间：
2019-12-28 13:11:36
阅读次数：
310
1. 安装包下载 百度云：链接：https://pan.baidu.com/s/1w_l9ncDvBuAjobQ7mNq4rA 提取码：i9zz 官网下载：https://www.netsarang.com/zh/downloading/?token=M2xZRW9GOG1XSHpHVEphZldL ...
分类：
系统相关 时间：
2019-12-27 21:52:58
阅读次数：
92
上一篇里介绍了Job和Trigger的常用方法，这一节将介绍Calendar，它的作用是排除特定的日期时间。 Calendar的常用类 DailyCalendar 排除每天某个时间段任务的执行 例子： var sche = StdSchedulerFactory.GetDefaultSchedule ...
分类：
Web程序 时间：
2019-12-27 13:10:37
阅读次数：
80
自动任务类： @PersistJobDataAfterExecution @DisallowConcurrentExecution public class ReCodeBack implements Job { private static final Logger LOGGER = Logger ...
分类：
其他好文 时间：
2019-12-25 12:52:17
阅读次数：
190
