协程是实现并发编程的一种方式。一说并发，你肯定想到了多线程/多进程模型，没错，多线程/多进程，正是解决并发问题的经典模型之一。最初的互联网世界，多线程/多进程在服务器并发中，起到举足轻重的作用。随着互联网的快速发展，你逐渐遇到了 C10K 瓶颈，也就是同时连接到服务器的客户达到了一万个。于是很多代码 ...
分类：
其他好文 时间：
2020-08-28 14:27:29
阅读次数：
39
一文讲透“进程，线程和协程” 本文从操作系统原理出发结合代码实践讲解了以下内容： 什么是进程，线程和协程？ 它们之间的关系是什么？ 为什么说Python中的多线程是伪多线程？ 不同的应用场景该如何选择技术方案？ ... 什么是进程 进程-操作系统提供的抽象概念，是系统进行资源分配和调度的基本单位，是 ...
分类：
编程语言 时间：
2020-08-27 17:05:24
阅读次数：
57
并发同步概述 本文将解释什么是并发同步，并列出Go支持的几种并发同步技术。 什么是并发同步？ 并发同步是指如何控制若干并发计算（在Go中，即协程），从而 避免在它们之间产生数据竞争的现象； 避免在它们无所事事的时候消耗CPU资源。 并发同步有时候也称为数据同步。 Go支持哪些并发同步技术？ 通道一文 ...
分类：
其他好文 时间：
2020-08-26 18:56:39
阅读次数：
51
Golang 协程 协程的特点 独立的栈空间 共享程序堆空间 调度由用户控制 协程是轻量级的线程 案例 编写一个程序完成如下功能： 在主线程中，开启一个goroutine, 该协程每隔1秒输出“hello world” 在主线程中也每隔一秒输出“hello golang”, 输出10次 要求主线程和 ...
分类：
其他好文 时间：
2020-08-17 17:19:44
阅读次数：
54
# 梨视频数据的爬取import requestsfrom lxml import etreeimport reheaders = { 'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, ...
分类：
编程语言 时间：
2020-08-11 00:25:01
阅读次数：
113
前言 前面我们为了解决go程同步的问题我们使用了channel, 但是go也提供了传统的同步工具. 它们都在go的标准库代码包 sync 和 sync/atomic 中. 下面我们来看一下锁的应用. 什么是锁呢? 就是某个协程(线程)在访问某个资源时先锁住, 防止其他协程的访问, 等访问完毕解锁后其 ...
分类：
其他好文 时间：
2020-08-04 09:46:17
阅读次数：
59
一、greenlet模块 如果我们在单个线程内有20个任务，要想实现在多个任务之间切换，使用yield生成器的方式过于麻烦（需要先得到初始化一次的生成器，然后再调用send。。。非常麻烦），而使用greenlet模块可以非常简单地实现这20个任务直接的切换。 from greenlet import ...
分类：
其他好文 时间：
2020-07-30 14:50:03
阅读次数：
64
sync.Cond 是一个事件通知，类似于java中的conditional 或者 wait/notify 机制。 它有一个重要的作用是，协程之间通过锁进行协调的时候，其中一个协程等待的时候，可以释放锁和资源，并且能够及时完成准备工作。 比如经典的生产者消费，例如有一个队列，只有大小为1，生产者需要 ...
分类：
编程语言 时间：
2020-07-30 01:33:46
阅读次数：
89
在认识yield的时候，网上很多文章都是说这个是个生成器，但是我并不知道这个是用来做什么的，所以概念很快就忘记了，后面读了几个文章以后感觉茅塞顿开。我就接介绍一下。 有一篇文章提到，可以把yield看成是生成器的return的一部分，首先一个return的作用是在程序中返回某个值，返回之后程序就不再 ...
分类：
编程语言 时间：
2020-07-28 14:38:10
阅读次数：
78
一、协程基础 cpython下多个线程不能利用多核：规避了所有的io操作的单线程。 协程 操作系统不可见 协程本质就是一条线程，多个任务在一条线程上来回切换，来规避io操作，降低了线程上的io操作降到最低。 4 cpu：可以接受5个进程，20个线程，协程500 切换并规避IO的模块 gevent 利 ...
分类：
其他好文 时间：
2020-07-26 19:02:39
阅读次数：
53
