RDD的操作 1.1 概述 RDD整体包含两大类操作 transformation 从现有中创建一个新的数据集 action 在对数据集做一定程度的计算后将结果返回 以MapReduce来说,Map就是一个transformation ,它是从每个文件块上执行一个方法来抽取转换,最终形成一个新的数据 ...
分类：
其他好文 时间：
2018-06-29 23:31:22
阅读次数：
1058
1、 什么是线程？ 线程是操作系统能够进行运算调度的最小单位，它被包含在进程之中，是进程中的实际运作单位。程序员可以通过它进行多处理器编程，你可以使用多线程对运算密集型任务提速。比如，如果一个线程完成一个任务要100毫秒，那么用十个线程完成改任务只需10毫秒。 2、线程和进程有什么区别？ 1）线程是 ...
分类：
编程语言 时间：
2018-06-29 17:21:13
阅读次数：
141
目前知道可以实现线程按照顺序的java原生方法有 join(),CountDownLatch,Executors.newSingleThreadExecutor(),FutureTask.. Future Clalback配合使用 ...
分类：
其他好文 时间：
2018-06-28 22:56:25
阅读次数：
174
``` package com.spider.utils; import java.util.concurrent.ExecutorService; import java.util.concurrent.Executors; import java.util.concurrent.atomic.A ...
分类：
其他好文 时间：
2018-06-26 16:11:29
阅读次数：
191
思考？ 1 为什么要使用执行器和线程池? 2 执行器和线程是什么?怎么使用 执行器 线程执行器分离了任务的创建和执行,提高了线程的性能 线程池 避免了频繁地创建和销毁线程,达到线程对象的重用,可以根据项目灵活地控制并发的数量 ExecutorService (java.util.concurrent ...
分类：
编程语言 时间：
2018-06-22 13:18:56
阅读次数：
132
1 Java基础 1.1 Collection和Map 1.2 IO 1.3 异常 1.4 多线程 掌握Executors可以创建的三种(JAVA8增加了一种，共四种)线程池的特点及适用范围。 Java多线程5: 线程池Java中的线程池 掌握多线程同步机制，并熟练运用。Java多线程1: 线程生命 ...
分类：
编程语言 时间：
2018-06-18 20:24:35
阅读次数：
235
一 Executors框架(线程池) 主要是解决开发人员进行线程的有效控制,原理可以看jdk源码,主要是由java.uitl.concurrent.ThreadPoolExecutor类实现的,这里只列出简单用法 根据Executors可以创建不同功能的线程池,主要有四种: 1 newFixedTh ...
分类：
编程语言 时间：
2018-06-17 16:50:11
阅读次数：
198
线程池：java语言为我们提供了一个管理线程的类型ExecutorService。 概念：创建多个线程，集合到一起就是线程池。 作用：自动创建线程，重用线程。 当创建大量的线程时，在线程结束后会有内存开销，线程的频繁切换也会造成大量的开销，很容易系统崩溃，所以设计了线程池。 线程池对象为我们提供了固 ...
分类：
编程语言 时间：
2018-06-16 11:54:04
阅读次数：
107
package other; import java.util.concurrent.Callable; import java.util.concurrent.Executors; import java.util.concurrent.ScheduledExecutorService; impo... ...
分类：
编程语言 时间：
2018-06-12 12:53:04
阅读次数：
176
ScheduledExecutorService progressExecutorService = Executors.newScheduledThreadPool(1); ScheduledFuture future = progressExecutorService.scheduleAtFix... ...
分类：
编程语言 时间：
2018-06-09 11:40:10
阅读次数：
186
