python爬虫涉及的库： 请求库，解析库，存储库，工具库 1. 请求库：urllib/re/requests （1） urllib/re是python默认自带的库，可以通过以下命令进行验证： 没有报错信息输出，说明环境正常 （2） requests安装 2.1 打开CMD，输入 2.2 等待安装后 ...
分类：
编程语言 时间：
2017-11-14 16:24:14
阅读次数：
217
1、打开文件的例子： 2、利用urllib库请求页面进行简单的翻译，请求百度翻译，将要翻译的内容当做参数传给百度，然后将结果赋值给参数，最后打印出来： 上代码： 实现效果如图： ...
分类：
编程语言 时间：
2017-11-14 11:28:05
阅读次数：
183
# 爬豆瓣需要用cookie# 需要注意隐藏的参数，即input 里面的默认的一些参数# 需要自己注册一个账户密码import urllib.requestimport http.cookiejarfrom lxml import etreeimport spiderimagehead= { 'Co ...
分类：
编程语言 时间：
2017-11-13 22:59:13
阅读次数：
217
Python访问网页主要使用包urllib 打开网页使用 例子： ...
分类：
编程语言 时间：
2017-11-13 16:45:54
阅读次数：
138
import urllib.requestimport os#下载资源到本地 url 网址 path 本地路径def downLoadPic(url,path): if not os.path.exists(path):#判断本地是否存在文件夹 os.makedirs(path) path=path ...
分类：
编程语言 时间：
2017-11-12 19:17:59
阅读次数：
165
from urllib import requesturl="http:........." #url地址Request = request.urlopen(url)Response=Request.read()with open('1.jpg','wb')as f: #保存在目录中 f.write ...
分类：
其他好文 时间：
2017-11-12 16:21:51
阅读次数：
167
request模块Requests:让HTTP服务人类虽然Python的标准库中urllib模块已经包含了平常我们使用的大多数功能，但是它的API使用起来让人感觉不太好，而Requests自称"HTTPforHumans"，说明使用更简洁方便。Requests唯一的一个非转基因的PythonHTTP库，人类可以安全享用：）Requests..
分类：
其他好文 时间：
2017-11-12 01:00:05
阅读次数：
130
下面是转发博客内容，挺有用的 大家好哈，现在呢静觅博客已经两年多啦，可能大家过来更多看到的是爬虫方面的博文，首先非常感谢大家的支持，希望我的博文对大家有帮助！ 之前我写了一些Python爬虫方面的文章，Python爬虫学习系列教程，涉及到了基础和进阶的一些内容，当时更多用到的是Urllib还有正则， ...
分类：
编程语言 时间：
2017-11-11 22:08:46
阅读次数：
206
urllib 标准库（py2中是urllib2） 子模块：request、parse、error request： urlopen函数：打开并读取一个从网络获取的远程对象 beautifulsoup4（bs4） 非标准库 Heading标签也叫做H标签，HTML语言里共六种大小的heading 标签 ...
分类：
其他好文 时间：
2017-11-11 19:52:41
阅读次数：
211
