码迷,mamicode.com
首页 > Web开发 > 详细

生成器的应用,爬取网页信息

时间:2017-04-12 20:37:07      阅读:175      评论:0      收藏:0      [点我收藏+]

标签:网页   while   迭代   内容   应用   blog   bsp   .com   函数   

#需求:生成器的应用     
#然后每次g.send(url),打印页面内容,利用g可以无限send

1 from urllib.request import urlopen   #导入爬虫模块
2 def get():
3     while True:
4         url = yield     #将函数改成协程函数
5         print(urlopen(url).read())  #打印爬取网页的结果
6 
7 g = get()   #将函数改成生成器
8 next(g)     #初始化生成器
9 g.send("http://www.baidu.com") #向迭代器内送值

 

生成器的应用,爬取网页信息

标签:网页   while   迭代   内容   应用   blog   bsp   .com   函数   

原文地址:http://www.cnblogs.com/domestique/p/6701096.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!