接上一篇:http://www.cnblogs.com/charlesblc/p/6097111.html 《Java并发学习 & Executor学习 & 异常逃逸 & 同步互斥Best Practice & wait/notify, conditon#await/signal》 原文参考:htt ...
分类:
编程语言 时间:
2016-11-26 17:20:54
阅读次数:
193
搭建Hadoop Yarn on Docker 一、概览 Docker基于Linux Container技术整合了一堆易用的接口用于构建非常轻量级的虚拟机。Docker Container Executor(DCE)使得Yarn NodeManager服务可以将其container进程运行在Dock ...
分类:
其他好文 时间:
2016-11-24 18:32:49
阅读次数:
253
SqlSession可以说是整个MyBatis的重中之重,在SqlSession中涉及到前一篇四大对象:Executor、StatementHandler、ParameterHandler、ResultHandler,所以在此先只对SqlSession有一个大概的了解。 在代码中我们可以看到当我们构 ...
分类:
移动开发 时间:
2016-11-16 02:32:08
阅读次数:
287
场景: 线程池在面试时候经常会碰到,在工作中用的场景更多,所以很有必要弄清楚。 1 简介 Java自1.5以来加入了处理一批线程的方法,也就是java并发包里的Executor。本文主要介绍ExecutorService的用法,Runable和Callable的用法以及ExecutorComplet ...
分类:
编程语言 时间:
2016-11-16 01:48:02
阅读次数:
156
概要 本章,我们对JUC包中的信号量Semaphore进行学习。内容包括:Semaphore简介Semaphore数据结构Semaphore源码分析(基于JDK1.7.0_40)Semaphore示例 转载请注明出处:http://www.cnblogs.com/skywang12345/p/353 ...
分类:
编程语言 时间:
2016-11-14 22:32:19
阅读次数:
528
此错误是由于版本造成的,如果使用mybatis3.4版本以上,配置拦截器规则应增加Intger ...
分类:
数据库 时间:
2016-11-14 00:38:29
阅读次数:
951
如何在Spark集群的work节点上启动多个Executor?默认情况下,Spark集群下的worker,只会启动一个Executor,只运行了一个CoarseGrainedExecutorBackend进程。Worker通过持有ExecutorRunner对象来控制CoarseGrainedExecutorBackend的启停。那么如何启动多个executor呢?通过设置参..
分类:
其他好文 时间:
2016-11-13 02:45:10
阅读次数:
4143
官方对storm中worker,executor,task讲解非常清楚,https://github.com/nathanmarz/storm/wiki/Understanding-the-parallelism-of-a-Storm-topology 转载到个人博客上。一图胜千言: Storm d ...
分类:
编程语言 时间:
2016-11-12 19:09:15
阅读次数:
259
SparkStreaming性能调优大全!一、日志已满:spark.executor.logs.rolling.maxSize下面三个日志rolling参数记得设置:spark.executor.logs.rolling.strategysizespark.executor.logs.rolling.maxSize134217728#defaultbytespark.executor.logs.rolling.maxRetainedFiles二、Spa..
分类:
其他好文 时间:
2016-11-12 02:41:38
阅读次数:
347
摘要: 1 shuffle原理 1.1 mapreduce的shuffle原理 1.1.1 map task端操作 1.1.2 reduce task端操作 1.2 spark现在的SortShuffleManager 2 Shuffle操作问题解决... ...
分类:
其他好文 时间:
2016-11-11 17:25:49
阅读次数:
270