Spark 源码解读（五）SparkContext的初始化之创建和启动DAGScheduler DAGScheduler主要用于在任务正式提交给TaskSchedulerImpl提交之前做一些准备工作，包括：创建job,将DAG中的RDD划分到不同的Stage,提交Stage等等。SparkCont ...
分类：
其他好文 时间：
2020-07-07 23:39:16
阅读次数：
102
oracle中的job能为你做的就是在你规定的时间格式里执行存储过程，定时执行一个任务 。下面是一个小案例，定时每15分钟向一张表插入一条数据 一 1.创建一张测试表 -- Create table create table A8 ( a1 VARCHAR2(500) ) tablespace DS ...
分类：
数据库 时间：
2020-07-07 19:55:48
阅读次数：
92
一、简介 打开Spring官网http://spring.io 首页的中部，可以看到Spring Cloud的简介。 【原文】Building distributed systems doesn't need to be complex and error-prone(易错). Spring Clo ...
分类：
编程语言 时间：
2020-07-07 18:08:44
阅读次数：
108
1、新建自由风格项目2、配置参数化构建，将发布状态Status、是否重启Reboot、发布版本号Version、发布的文件file、发布的项目project、要发布的tomcat名称tomcat_name、发布的路径update_path分别设置为参数3、先执行一次发布，会在/var/lib/jenkins/workspace生成job名的文件夹，我这里是hczd-sys_for_Onlyall4
分类：
其他好文 时间：
2020-07-07 15:51:04
阅读次数：
70
# 这种方法我之前没有接触过 fields = ('name', 'age', 'job', 'pay') record = dict.fromkeys(fields, '?') print(record) ...
分类：
编程语言 时间：
2020-07-07 15:26:07
阅读次数：
71
import pprint bob = {'name': 'Bob Smith', 'age': 42, "pay": 30000, "job": "dev"} sue = {'name': 'Sue Jones', 'age': 45, "pay": 40000, "job": "hdw"} db ...
分类：
其他好文 时间：
2020-07-07 15:21:34
阅读次数：
34
RDD(Resilient Distributed Dataset)叫做分布式数据集，是Spark中最基本的数据抽象，它代表一个可分区，不可变，里面的元素可并行计算的结合。RDD具有自动容错、位置感知性调度和可伸缩性。RDD允许用户在执行多个查询时显示地将工作集换存在内存中，后续的查询能够重用工作集 ...
分类：
其他好文 时间：
2020-07-06 16:20:23
阅读次数：
61
标题 #!/bin/bash #uninstall system installed mysql(rpm version) rpm -qa |grep mysql rpm -e --nodeps *mysql* rpm -qa |grep mariadb rpm -e --nodeps mariad ...
分类：
数据库 时间：
2020-07-06 10:25:57
阅读次数：
66
Google的三篇论文，Google File System，MapReduce以及Big Table可以说是整个大数据领域的三驾马车，这里，我们简单介绍下这三驾马车基本都是干哈的，重点解读下Bigtable: A Distributed Storage System for Structured ...
分类：
其他好文 时间：
2020-07-05 17:38:34
阅读次数：
68
Jenkins+jmeter实现接口自动化测试 工具： Jenkins + Jmeter 思路： 1.准备好已经调试好的jmeter脚本 2.本地已搭建好jenkins环境 3.在Jenkins中新建job ，添加构建参数 以命令行的方式运行jmeter脚本 1.准备好Jmeter脚本 xxx.jm ...
分类：
其他好文 时间：
2020-07-05 13:58:26
阅读次数：
98
