一：线程与进程 1.概念 线程：是程序执行流的最小单元，是系统独立调度和分配CPU（独立运行）的基本单位。 进程：是资源分配的基本单位。一个进程包括多个线程。 2.区别： 1.线程与资源分配无关，它属于某一个进程，并与进程内的其他线程一起共享进程的资源。 2.每个进程都有自己一套独立的资源（数据）， ...
分类：
编程语言 时间：
2018-08-21 15:13:42
阅读次数：
114
（1）多线程多进程的区别 维度 多进程 多线程 总结 数据共享、同步 数据是分开的:共享复杂，需要用IPC;同步简单 多线程共享进程数据：共享简单；同步复杂 各有优势 内存、CPU 占用内存多，切换复杂，CPU利用率低 占用内存少，切换简单，CPU利用率高 线程占优 创建销毁、切换 创建销毁、切换复 ...
分类：
编程语言 时间：
2018-08-19 20:56:31
阅读次数：
230
现在多进程多线程已经是老生常谈了，协程也在最近几年流行起来。python中有协程库gevent，py web框架tornado中也用了gevent封装好的协程。本文主要介绍进程、线程和协程三者之间的区别。 一、概念 1、进程 进程是具有一定独立功能的程序关于某个数据集合上的一次运行活动,进程是系统进 ...
分类：
编程语言 时间：
2018-08-10 21:20:00
阅读次数：
162
先来个最简单的例子： 把1-10000每个数求平方 服务器server： 用两个队列存储任务、结果 定义两个函数 要实现分布式得继承multiprocessing.managers.BaseManager 在主函数里multiprocessing.freeze_support()开启分布式支持 注册 ...
分类：
编程语言 时间：
2018-08-04 13:42:27
阅读次数：
161
进程和线程 1.线程和进程的定义 进程定义 ：一个程序在一个数据集上的一次动态执行过程。 简单来说： 如果把 进程比喻成桌子，线程比喻成人，程序比喻成吃饭 。 1. 单进程单线程 ：一个人在一个桌子上吃饭 2. 单进程多线程 ：一堆人在一张桌子上一起吃饭 3. 多进程多线程 ：每个人在自己的桌子上吃 ...
分类：
编程语言 时间：
2018-07-24 12:26:20
阅读次数：
139
高性能爬虫方案： 多进程 多线程 利用“异步非阻塞”模块实现单线程并发请求。 本质 IO多路复用： 监听多个socket是否发生变化 IO多路复用的作用： 1.select，内部循环检测socket是否发生变化；最多只能检测1024个socket 2.poll，内部循环检测socket是否发生变化； ...
分类：
编程语言 时间：
2018-07-12 20:47:50
阅读次数：
180
爬虫开发过程中 进程和线程的概念是非常重要的 提高爬虫的 工作效率 打造分布式爬虫 都离不开进程和线程的身影 多进程 多线程 协程 分布式进程等四个方面 使用os模块中的fork方法 使用multiprocessing模块 前者仅仅适用Unix/Linux操作系统 对windows不支持 后者是跨平 ...
分类：
编程语言 时间：
2018-07-04 13:24:44
阅读次数：
124
1. 并发编程 1. 实现让程序同时执行多个任务也就是常说的“并发编程” 2. 使用Python实现并发编程主要有3种方式：多进程、多线程、多进程+多线程。 3. 进程间通信必须通过进程间通信机制（IPC，Inter Process Communication）来实现数据共享，具体的方式包括管道、信 ...
分类：
编程语言 时间：
2018-06-26 00:44:22
阅读次数：
155
# 多线程、多进程# 1、线程是程序里面最小的执行单元# 2、进程是资源的集合# 线程是包含在一个进程里面的，一个进程可以有多个进程# 一个进程里面默认有一个线程# import threading,time## def run():# time.sleep(3) #干活需要3S# print('哈 ...
分类：
编程语言 时间：
2018-06-01 13:43:42
阅读次数：
202
1.多线程、多进程的简介： 1）线程是程序里面最小的执行单元。 2）进程是资源的集合。 线程是包含在一个进程里面的， 一个进程可以有多个线程。 一个进程里面默认有一个线程。 2.多线程 import threading,time #导入线程模块 def run(): time.sleep(3) #干 ...
分类：
编程语言 时间：
2018-05-29 01:37:42
阅读次数：
194
