码迷,mamicode.com
首页 >  
搜索关键字:executor    ( 1219个结果
storm中worker、executor、task之间的关系
理清一下worker、executor、task、supervisor、nimbus、zk这几个之间的关系先来看一张图(图片来自:http://www.cnblogs.com/foreach-break/p/storm_worker_executor_spout_bolt_simbus_superv...
分类:其他好文   时间:2015-10-31 20:02:11    阅读次数:308
Spark修炼之道(高级篇)——Spark源码阅读:第八节 Task执行
Task执行在上一节中,我们提到在Driver端CoarseGrainedSchedulerBackend中的launchTasks方法向Worker节点中的Executor发送启动任务命令,该命令的接收者是CoarseGrainedExecutorBackend(Standalone模式),类定义源码如下:private[spark] class CoarseGrainedExecutorBack...
分类:其他好文   时间:2015-10-29 00:49:13    阅读次数:243
Volley内部UI层回调的实现代码
Volley内部UI层回调的实现代码...
分类:其他好文   时间:2015-10-27 17:42:39    阅读次数:165
Executor 和Executors
Java里面线程池的顶级接口是Executor,但是严格意义上讲Executor并不是一个线程池,而只是一个执行线程的工具。真正的线程池接口是ExecutorService。下面这张图完整描述了线程池的类体系结构。首先Executor的execute方法只是执行一个Runnable的任务,当然了从某...
分类:其他好文   时间:2015-10-25 22:19:46    阅读次数:190
Spark作业调度
Spark在任务提交时,主要存在于Driver和Executor的两个节点.(1)Driver的作用: 用于将所有要处理的RDD的操作转化为DAG,并且根据RDD DAG将JBO分割为多个Stage,最后生成相应的task,分发到各个Executor执行.流程:sc.runJob -> DAGS.....
分类:其他好文   时间:2015-10-23 01:38:28    阅读次数:342
Java Executor 框架
Java Executor 框架 Executor框架是指java5中引入的一系列并发库中与executor相关的功能类,包括Executor、Executors、 ExecutorService、CompletionService、Future、Callable等。(图片引用自 http://w....
分类:编程语言   时间:2015-10-20 22:47:50    阅读次数:370
Spark修炼之道(高级篇)——Spark源码阅读:第一节 Spark应用程序提交流程
spark-submit 脚本应用程序提交流程执行提交命令如下:root@sparkmaster:/hadoopLearning/spark-1.5.0-bin-hadoop2.4/bin# ./spark-submit --master spark://sparkmaster:7077 --class SparkWordCount --executor-memory 1g /root/IdeaPr...
分类:其他好文   时间:2015-10-19 22:36:11    阅读次数:300
Storm系列(十六)架构分析之Executor-Bolt
Storm系列(十六)架构分析之Executor-Bolt
分类:其他好文   时间:2015-10-19 15:23:47    阅读次数:751
Java多线程开发技巧
很多开发者谈到Java多线程开发,仅仅停留在new Thread(...).start()或直接使用Executor框架这个层面,对于线程的管理和控制却不够深入,通过读《Java并发编程实践》了解到了很多不为我知但又非常重要的细节,今日...
分类:编程语言   时间:2015-10-19 12:57:57    阅读次数:235
Storm系列(十五)架构分析之Executor-Spout
storm架构分析之Executor-spout
分类:其他好文   时间:2015-10-19 12:18:59    阅读次数:462
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!