urllib 模块是一个高级的 web 交流库，其核心功能就是模仿web浏览器等客户端，去请求相应的资源，并返回一个类文件对象。urllib 支持各种 web 协议，例如：HTTP、FTP、Gopher；同时也支持对本地文件进行访问。但一般而言多用来进行爬虫的编写，而下面的内容也是围绕着如何使用 u ...
分类：
编程语言 时间：
2016-06-07 14:43:34
阅读次数：
274
#!/usr/bin/python3# -*- encoding:utf-8 -*-# 网易云音乐批量下载import requestsimport urllib# 榜单歌曲批量下载# r = requests.get('http://music.163.com/api/playlist/detai ...
分类：
编程语言 时间：
2016-06-07 12:42:25
阅读次数：
708
协议功能端口模块 HTTP 网页 80 httplib,urllib,xmlrpclib NNTP Usenet 新闻组 119 nntplib FTP 文件传输 20（21控制和命令端口） ftplib,urllib SMTP 发送邮件 25 smtplib POP3 接收邮件 110 popli ...
分类：
编程语言 时间：
2016-06-01 21:25:33
阅读次数：
192
静觅 » Python爬虫入门四之Urllib库的高级用法 1.设置Headers 有些网站不会同意程序直接用上面的方式进行访问，如果识别有问题，那么站点根本不会响应，所以为了完全模拟浏览器的工作，我们需要设置一些Headers 的属性。 首先，打开我们的浏览器，调试浏览器F12，我用的是Chrom ...
分类：
编程语言 时间：
2016-06-01 15:34:36
阅读次数：
161
安装package control插件 1.使用 ctrl+~ 或 view->show console 打开命令窗口 2.复制以下代码 import urllib.request,os; pf = 'Package Control.sublime-package'; ipp = sublime.i ...
分类：
其他好文 时间：
2016-05-31 20:50:00
阅读次数：
145
在python学习群里发现很多学习网络爬虫技术的童靴都搞不懂python爬虫框架scrapy的安装配置，在学习python网络爬虫初级阶段的时候我们利用urllib和urllib2库以及正则表达式就可以完成了，不过遇到更加强大的爬虫工具——爬虫框架Scrapy，这安装过程也是煞费苦心哪，在此整理如下。
分类：
编程语言 时间：
2016-05-30 14:55:58
阅读次数：
405
参考资料 Python官方文档 知乎相关资料(1) 这篇非常好, 通俗易懂的总览整个Python学习框架. 知乎相关资料(2) 代码实现(一): 用Python抓取指定页面 urllib.request是一个库, 隶属urllib. 点此打开官方相关文档. 官方文档应该怎么使用呢? 首先点刚刚提到的 ...
分类：
编程语言 时间：
2016-05-27 16:42:29
阅读次数：
224
链接：http://www.cnblogs.com/luoshupeng/archive/2013/09/09/3310777.html 一、简单的安装方法 使用Ctrl+`快捷键或者通过View->Show Console菜单打开命令行，粘贴如下代码： import urllib.request, ...
分类：
其他好文 时间：
2016-05-27 14:38:57
阅读次数：
355
需求： 在下面这个网页，抓取最新的新闻，按天划分。 http://blog.eastmoney.com/13102551638/bloglist_0_1.html 实现方法1：使用递归 import urllibimport reimport time #读取网页内容content = urllib ...
分类：
编程语言 时间：
2016-05-25 20:18:32
阅读次数：
158
#coding=utf-8 import urllib import re def downloadPage(url): h = urllib.urlopen(url) return h.read() def downloadImg(content): pattern = r'src="(.+?\. ...
分类：
编程语言 时间：
2016-05-25 00:31:36
阅读次数：
254
