进程池(Pool) 当需要创建的子进程数量不多时，可以直接利用multiprocessing中的Process动态成生多个进程，但如果是上百甚至上千个目标，手动的去创建进程的工作量巨大，此时就可以用到multiprocessing模块提供的Pool方法。 初始化Pool时，可以指定一个最大进程数，当 ...
分类：
系统相关 时间：
2018-09-20 22:53:19
阅读次数：
233
一、为什么要有进程池 开启过多的进程并不能提高你的效率,反而会降低效率。 1.1 计算密集型 充分占用CPU 多进程可以充分利用多核。适合开启多进程，但是不适合开启很多多进程。 1.2 IO密集型 大部分时间都在阻塞对列中，而不是在运行状态中 根本不太适合开启多进程 简单进程池的代码实现 >异步提交 ...
分类：
系统相关 时间：
2018-09-20 21:53:10
阅读次数：
173
回到python，用一下python的进程池。 记得之前面试的时候，面试官问：你知道进程池的默认参数吗？ 我没有回答上来，后来才知道，是有默认参数的。下面就看看它的默认参数 1. 不加参数 2. 加参数5 ...
分类：
编程语言 时间：
2018-09-20 19:52:31
阅读次数：
150
队列 1 from multiprocessing import Process,Queue 2 3 def consume(q): 4 print('son-->', q.get()) #取值 5 q.put('abc') #放值 6 7 if __name__ == '__main__': 8 ...
分类：
系统相关 时间：
2018-09-20 17:21:44
阅读次数：
259
python多线程适合IO密集型场景，而在CPU密集型场景，并不能充分利用多核CPU，而协程本质基于线程，同样不能充分发挥多核的优势。 针对计算密集型场景需要使用多进程，python的multiprocessing与threading模块非常相似，支持用进程池的方式批量创建子进程。 示例代码： 注意 ...
分类：
编程语言 时间：
2018-09-19 16:10:32
阅读次数：
200
[TOC] #管道 ``` from multiprocessing import Pipe,Process def func(conn2): print(conn2.recv()) conn1,conn2 = Pipe() conn1.send("Hello pipe") p = Process(... ...
分类：
系统相关 时间：
2018-09-19 01:21:06
阅读次数：
175
可以重复利用的线程 直接上代码 结果： 线程池的简单实现 池的概念 主线程： 相当于生产者，只管向线程池提交任务。 并不关心线程池是如何执行任务的。 因此，并不关心是哪一个线程执行的这个任务。线程池： 相当于消费者，负责接收任务， 并将任务分配到一个空闲的线程中去执行。 代码实现如下： 结果： Py ...
分类：
编程语言 时间：
2018-09-17 00:32:39
阅读次数：
245
一. 进程和线程的区别？ 第一： 进程是cpu资源分配的最小单元。 线程是cpu计算的最小单元。 第二： 一个进程中可以有多个线程。 第三： 对于Python来说他的进程和线程和其他语言有差异，是有GIL锁。 GIL锁保证一个进程中同一时刻只有一个线程被cpu调度。 IO密集型操作可以使用多线程；计 ...
分类：
编程语言 时间：
2018-09-12 21:09:14
阅读次数：
210
一丶进程 1.什么是进程 进程是计算机中的程序关于某数据集合上的一次运行活动,是系统进行进行资源分配和调度的基本单位,是操作系统结构的基础.在早期面向进程设计的计算机结构中,进程是程序的基本执行实体;在当代面向线程设计的计算机结构中,进程是线程的容器.程序时指令丶数据及其组织形式的描述,进程是程序的 ...
分类：
系统相关 时间：
2018-09-12 20:10:07
阅读次数：
193
一、进程池与线程池 实现并发的手段有两种，多线程和多进程。注：并发是指多个任务看起来是同时运行的。主要是切换+保存状态。 当我们需要执行的并发任务大于cpu的核数时，我们需要知道一个操作系统不能无限的开启进程和线程，通常有几个核就开几个进程，如果进程开启过多，就无法充分利用cpu多核的优势，效率反而 ...
分类：
编程语言 时间：
2018-09-11 01:09:36
阅读次数：
321
