JDK future框架,提供了一种异步编程模式,基于线程池的。将任务runnable/callable提交到线程池executor,返回一个Future对象。通过future.get()获取执行结果,这里提交到线程池,后面的操作不会阻塞。future.get()获取结果会阻塞,其实也是用多线线程执 ...
分类:
编程语言 时间:
2018-12-01 10:59:55
阅读次数:
183
yarn启动spark进行测试时候发现,几台机器上启动executor都失败了,日志如下2018-11-22 14:32:24 WARN YarnAllocator:66 - Container marked as failed: container_1516236189600_0229_01_00 ...
分类:
其他好文 时间:
2018-11-22 16:05:24
阅读次数:
308
不想看废话的可以直接拉到最底看总结 废话开始: master: master主机存在文件,却报 执行spark-shell语句: ./spark-shell --master spark://master:7077 --executor-memory 1G --total-executor-core ...
分类:
编程语言 时间:
2018-11-22 14:35:21
阅读次数:
308
沉淀再出发:jetty的架构和本质 一、前言 我们在使用Tomcat的时候,总是会想到jetty,这两者的合理选用是和我们项目的类型和大小息息相关的,Tomcat属于比较重量级的容器,通过很多的容器层层包裹提供了非常强大的web功能,但是可以自我定制的余地就非常小了,有的时候我们希望自己设计更多的请 ...
分类:
其他好文 时间:
2018-11-20 13:20:57
阅读次数:
219
Promise Promise对象用于一个异步操作的最终完成(包括成功和失败)及结果值的表示。 简单说,就是处理异步请求的。 之所以叫做Promise,就是我承诺,如果成功则怎么处理,失败则怎么处理。 executor executor 是一个带有 resolve 和 reject 两个参数的函数 ...
分类:
其他好文 时间:
2018-11-18 16:09:12
阅读次数:
205
jdk1.5引入Executor线程池框架,通过它把任务的提交和执行进行解耦,只需要定义好任务,然后提交给线程池,而不用关心该任务是如何执行、被哪个线程执行,以及什么时候执行。 初始化线程池(4种) 简介: Java线程池的工厂类:Executors类, 初始化4种类型的线程池: newCached ...
分类:
编程语言 时间:
2018-11-17 23:19:03
阅读次数:
215
Mybatis核心成员 Configuration MyBatis所有的配置信息都保存在Configuration对象之中,配置文件中的大部分配置都会存储到该类中 SqlSession 作为MyBatis工作的主要顶层API,表示和数据库交互时的会话,完成必要数据库增删改查功能 Executor M ...
分类:
其他好文 时间:
2018-11-14 14:35:54
阅读次数:
178
import java.util.Date; import java.util.concurrent.Executor; import java.util.concurrent.Executors; import org.slf4j.Logger; import org.slf4j.LoggerFa... ...
分类:
编程语言 时间:
2018-11-13 17:16:08
阅读次数:
320
GIL1.全局解释器锁? 锁就是线程里面那个锁 锁是为了避免资源竞争造成数据的错乱2.python程序的执行过程? 1.启动解释器进程 python.exe 2.解析你的py文件并执行它每个py程序中都必须有解释器参与,解释器其实就是一堆代码相当于多个线程要调用同一个解释器代码,共享以为竞争,竞争就 ...
分类:
编程语言 时间:
2018-11-12 21:45:07
阅读次数:
180
1.多线程网络IO请求: #!/usr/bin/python #coding:utf-8 from concurrent.futures import ThreadPoolExecutor import requests #线程池 # def get_page(url): # response = ...
分类:
编程语言 时间:
2018-11-11 16:54:28
阅读次数:
199