跑spark job的时候碰到了错误: 这是因为nmPrivate目录没有权限访问引起的。 参考: "https://www.oschina.net/question/2288283_2134188" ...
分类:
其他好文 时间:
2020-05-25 09:22:14
阅读次数:
74
一般来说,一个spark程序包含两种 JVM 程序,Dirver 和 Executor。Dirver 是主要的控制程序,负责创建 context,提交任务,那 job 转换为 task 并且协调 task 在 executor 中的执行。Executor 主要是负责执行计算任务并且将结果返回给 Dr ...
分类:
其他好文 时间:
2020-05-24 23:52:11
阅读次数:
70
Therefore, as a result, so, then, consequently She was therefore unable to find a solution. So she had to quit her job. I think; therefore I am. ‘We h ...
分类:
其他好文 时间:
2020-05-23 20:19:07
阅读次数:
83
本文以在SpringBoot下集成ElasticJob的方式对其进行浅析,仅仅是简单使用,不涉及源码级别研究。 事先必备: 注册中心——zookeeper 简略结构: 代码目录结构: ├─.idea └─src └─main ├─java │ └─com │ └─sakura │ ├─configu ...
分类:
编程语言 时间:
2020-05-22 19:06:43
阅读次数:
119
[TOC] 一、一段代码引发的思考 首选,看下面这段代码会输出什么结果? 我们在主线程休眠1s后将子线程用到的stop开关设为了true,这个时候子线程是不是应该停止while循环,输出i的最终结果呢? 运行结果: 最终结果是程序会在后台一直运行.. 这说明了我们在主线程中修改的内容对子线程是不可见 ...
分类:
编程语言 时间:
2020-05-22 14:26:58
阅读次数:
60
一、赛题理解 本次比赛任务是利用历史数据并结合地图信息 预测五和张衡交叉路口 未来一周 周一(2019年2月11日)和周四(2019年2月14日)两天 的5:00-21:00通过wuhe_zhangheng路口4个方向的车流量总和。 要求模型输出格式如下: {"data":{"resp_data": ...
分类:
其他好文 时间:
2020-05-21 22:29:17
阅读次数:
343
期中集群架构-第六章-ansible批量管理服务介绍 01.批量管理服务知识介绍 a ansible是一个基于Python开发的自动化运维工具 b ansible是一个基于SSH协议实现远程管理的工具 c ansible软件可以实现多种批量管理操作 (批量系统配置、批量软件部署、批量文件拷贝、批量运 ...
分类:
其他好文 时间:
2020-05-20 15:57:11
阅读次数:
64
1、redis 是一个内存数据库,当redis 服务器重启,或电脑重启,数据会丢失,所以需要持久化到硬盘 2、redis 持久化机制: Redis 提供了多种不同级别的持久化方式: (1)RDB :默认方式,不需要配置。RDB持久化可以在指定的时间间隔内生成数据集的时间点快照(point-in-ti ...
分类:
其他好文 时间:
2020-05-19 01:07:19
阅读次数:
50
题目 A family hierarchy is usually presented by a pedigree tree. Your job is to count those family members who have no child. Input Specification: Each ...
分类:
其他好文 时间:
2020-05-18 18:45:58
阅读次数:
61
CSV转Excel,命中关键词标红 package com.wenwo.schedule.job.mainJob; import java.io.ByteArrayOutputStream; import java.io.File; import java.io.FileOutputStream; ...
分类:
其他好文 时间:
2020-05-18 16:11:50
阅读次数:
54