上节回顾 python多线程（实际：单线程的上下文切换） IO操作基本不占用CPU #从内存、硬盘、网络读写数据等操作 适合多线程 计算占用CPU #1+1 适合多进程 python多进程（multiprocessing） 8核 >在同一时间可以干8件事（起8个进程） 多进程特点： 每一个进程都是由 ...
分类：
编程语言 时间：
2017-10-20 10:05:16
阅读次数：
183
多进程 进程之间是相互独立的，python是启动进程的时候，是启动的是原生进程。进程是没有GIL锁的，而且不存在锁的概念，进程之间的数据式不能共享的，而线程是可以的。 1、进程的定义 用muliprocessing这个包中的Process来定义多进程，跟定义多线程类似 2、进程中加入线程 3、父子进 ...
分类：
编程语言 时间：
2017-10-12 16:14:12
阅读次数：
792
多任务的两种方式：多进程和多线程。 如果用多进程实现Master-Worker，主进程就是Master，其他进程就是Worker。 如果用多线程实现Master-Worker，主线程就是Master，其他线程就是Worker。 多进程模式最大的优点就是稳定性高，缺点是创建代价大 过多的线程切换消耗资 ...
分类：
编程语言 时间：
2017-10-10 19:09:43
阅读次数：
248
import multiprocessing import time # 具体的处理函数，负责处理单个任务 def func(msg): # for i in range(3): print (msg) time.sleep(1) return "done " + msg if __name__ =... ...
分类：
编程语言 时间：
2017-09-27 16:20:14
阅读次数：
242
在代码优化的过程中，碰到了这样一个问题：一个进程中我定义了几个全局变量，然后我又Process了几个子进程，子进程中是否可以各自对全局变量进行修改？最后全局变量会取哪个值呢？ 经过一番尝试以后得到结果： 子进程继承父进程的全局变量，而且是以复制的形式完成，所以子进程修改后的全局变量只对自己和自己的子 ...
分类：
编程语言 时间：
2017-09-14 20:21:24
阅读次数：
252
我们之前基于tcp所做的通信都只能一个一个链接只有关闭当前链接时才能去链接下一个通信，这显然与现实情况不合。今天我们将来学一个心得概念进程，来做一个python多进程的并发编程。还会贴一个用json序列化将上个随笔中的ssh例子优化的代码。 ...
分类：
系统相关 时间：
2017-08-24 19:45:47
阅读次数：
244
1、多线程的理解 线程是最小的执行单元，而进程由至少一个线程组成。线程的特点是线程之间可以共享内存和变量，资源消耗少。如何调度进程和线程，完全由操作系统决定，程序自己不能决定什么时候执行，执行多长时间。 2、Python多线程创建 ...
分类：
编程语言 时间：
2017-08-09 21:05:18
阅读次数：
153
Python 入门网络爬虫之精华版 转载 宁哥的小站，总结的不错 Python学习网络爬虫主要分3个大的版块：抓取，分析，存储 另外，比较常用的爬虫框架Scrapy，这里最后也详细介绍一下。 首先列举一下本人总结的相关文章，这些覆盖了入门网络爬虫需要的基本概念和技巧：宁哥的小站-网络爬虫 当我们在浏 ...
分类：
编程语言 时间：
2017-07-19 01:10:54
阅读次数：
310
1 #!/usr/bin/python 2 import multiprocessing,time 3 4 class ClockProcess(multiprocessing.Process): 5 def __init__(self,value): 6 super(ClockProcess,se... ...
分类：
编程语言 时间：
2017-07-17 16:17:35
阅读次数：
180
首先我们知道进程和线程最明显的区别是： 多进程环境中，每个进程有自己的进程数据，各个进程数据之间是相互独立的。一个进程可以有多个线程，多个线程共享该进程的数据。 #-*- coding:utf-8 -*- import os from nt import getpid print("current ...
分类：
编程语言 时间：
2017-07-16 10:10:29
阅读次数：
259
