5. 创建任务调度器TaskScheduler TaskScheduler也是SparkContext的重要组成部分，负责任务的提交，并且请求集群管理器对任务调度。TaskScheduler也可以看作任务调度的客户端。创建TaskScheduler的代码如下： createTaskScheduler ...
分类：
其他好文 时间：
2018-07-15 23:21:25
阅读次数：
178
4. Hadoop相关配置及Executor环境变量的设置 4.1 Hadoop相关配置信息 默认情况下，Spark使用HDFS作为分布式文件系统，所以需要获取Hadoop相关配置信息的代码如下： 获取的配置信息包括： 将Amazon S3文件系统的AccessKeyId和SecretAccessK ...
分类：
其他好文 时间：
2018-07-15 23:13:01
阅读次数：
233
第五节介绍了TaskScheduler的创建，要想TaskScheduler发挥作用，必须要启动它，代码： TaskScheduler在启动的时候，实际调用了backend的start方法，即同时启动了backend。local模式下，这里的backend是localSchedulerBackend ...
分类：
其他好文 时间：
2018-07-15 22:13:31
阅读次数：
154
tf.nn.nce_loss是word2vec的skip-gram模型的负例采样方式的函数，下面分析其源代码。 1 上下文代码 其中， train_inputs中的就是中心词，train_label中的就是语料库中该中心词在滑动窗口内的上下文词。 所以，train_inputs中会有连续n-1（n为 ...
分类：
其他好文 时间：
2018-07-09 17:17:32
阅读次数：
621
介绍了Cesium后期处理的大体流程，并对物体描边、模型轮廓的实现过程进行了详细描述。 ...
分类：
其他好文 时间：
2018-07-07 20:40:36
阅读次数：
835
Flask中的路由系统其实我们并不陌生了,从一开始到现在都一直在应用 @app.route("/",methods=["GET","POST"]) 为什么要这么用?其中的工作原理我们知道多少? 请关注跟DragonFire学Flask 之 路由系统 ,这里有你想要的答案 1. @app.route( ...
分类：
其他好文 时间：
2018-07-06 01:43:44
阅读次数：
170
百度云盘下载----------------------课程目录------------------------------│├1.Overview.mp4│├2.内存分配的每一层面.mp4│├3.四个层面的基本用法.mp4│├4.基本构件之一newdeleteexpression(上).mp4│├5.基本构件之一newdeleteexpression(中).mp4│├6.基本构件之一newdel
分类：
编程语言 时间：
2018-07-05 17:20:07
阅读次数：
182
网盘下载：STL源码剖析简体中文完整版(高清晰扫描带目录)PDF下载 – 易分享电子书PDF资源网 作者: 侯捷 出版社: 华中科技大学出版社 出版年: 2002-6 页数: 493 定价: 68.00元 装帧: 平装 ISBN: 9787560926995 内容简介 · · · · · · 学习编 ...
分类：
其他好文 时间：
2018-07-03 14:43:32
阅读次数：
433
网盘下载：Python源码剖析 pdf下载 – 易分享电子书PDF资源网 作者: 陈儒 出版社: 电子工业出版社 副标题: 深度探索动态语言核心技术 出版年: 2008-6 页数: 480 定价: 69.80元 装帧: 平装 ISBN: 9787121068744 内容简介 · · · · · · ...
分类：
编程语言 时间：
2018-07-02 17:43:12
阅读次数：
361
之前就一直有写博客的想法，别人也建议写一写，但一直没有动手写，自己想了一下原因，就一个字：懒、懒、懒。为了改掉这个毛病，决定从今天开始写博客了，一方面对自己掌握的知识做一个梳理，另一方面和大家做一个交流，更能深化对问题的理解。废话好像有点多，好了，各位乘客，收起小桌板，系好安全带，要发车喽。 Ces ...
分类：
其他好文 时间：
2018-07-02 00:05:06
阅读次数：
1444
