我注意到一个很奇怪的事情。在极客学院爬虫课视频里，老师说要用requests，但是在其他学习群里，很多同学都在讨论urllib/urllib2相关。
然后就迷惑了，为什么会有这三个东西呢？扒了扒国内的博客网站，大多都是urllib相关，并且不推荐使用requests包。于是去墙外搜了下，竟然发现国外大多推荐用requests。我完全愣到了，完全相反的意见。...
分类：
编程语言 时间：
2016-05-13 00:18:13
阅读次数：
641
对Python有一些简单了解的朋友都知识Python编程语言有个很强大的功能，那就是Python网络爬虫（http://www.maiziedu.com/course/python/645-9570/），一提到Python，就会想到相关的Python爬虫和scrapy等等，今天就来简单认识学习Python爬虫的基础知识，有了一定的相关爬虫知识，以后学习scrapy、urllib等等知识时，会相对轻...
分类：
编程语言 时间：
2016-05-12 21:11:47
阅读次数：
162
requests模块 在Python内置模块（urllib、urllib2、httplib）的基础上进行了高度的封装，从而使得Pythoner更好的进行http请求，使用Requests可以轻而易举的完成浏览器可有的任何操作。Requests 是使用 Apache2 Licensed 许可证的 基于... ...
分类：
编程语言 时间：
2016-05-11 23:25:41
阅读次数：
362
一，获取整个页面数据Urllib模块提供了读取web页面数据的接口，我们可以像读取本地文件一样读取www和ftp上的数据。首先，我们定义了一个getHtml()函数:urllib.urlopen()方法用于打开一个URL地址。read()方法用于读取URL上的数据，向getHtml()函数传递一个网址，并把整个页面下..
分类：
编程语言 时间：
2016-05-09 18:57:37
阅读次数：
232
该小脚本实现对电影天堂网站的最新电影查找。frombs4importBeautifulSoup
importurllib
importre
url=‘http://www.ygdy8.net/html/gndy/dyzz/index.html‘
moive_url_list=[]
moive_name_list=[]
request=urllib.urlopen(url)
response=request.read()
response=unicode(respons..
分类：
编程语言 时间：
2016-05-09 07:15:15
阅读次数：
218
脚本一：#!/usr/bin/envpython
#coding:utf-8
frombs4importBeautifulSoup
importurllib
importre
art={}
forpageinrange(1,5):
page=str(page)
url=‘http://yujianglei.blog.51cto.com/all/7215578/page/‘+page
response=urllib.urlopen(url).read()
response=unicode(respons..
分类：
编程语言 时间：
2016-05-08 01:23:18
阅读次数：
205
1、同步请求
import tornado.httpserver
import tornado.ioloop
import tornado.options
import tornado.web
import tornado.httpclient
import urllib
import json
import datetime
import time
from tornado.optio...
分类：
Web程序 时间：
2016-05-06 12:31:03
阅读次数：
203
初学python，所用python3.5，根据教程写代码，所抓取的网页为新浪博客中的一篇文章，在使用urllib.request.urlopen(url).read()的返回值时，发现content的类型为bytes，如果不进行类型转换的话，在python打印时是乱码。 解决方案是将content解 ...
分类：
编程语言 时间：
2016-05-04 22:30:17
阅读次数：
2394
Sublime Text常用插件 1.Package Control 快捷键ctrl+~调出Sublime Text控制台，然后输入以下代码（Sublime Text3）安装Package Control，之后就可以通过Package Control工具安装其他插件了。 import urllib. ...
分类：
其他好文 时间：
2016-05-01 12:22:10
阅读次数：
174
import requests import Queue import urllib import urllib2 import re import requests alreadyImg = set() s = requests.session() s.post("http://acm.hrbus ...
分类：
其他好文 时间：
2016-04-27 22:30:48
阅读次数：
238
