2018/7/21，这几天整理出来的一些Python 爬虫学习代码。 import urllib2 response = urllib2.urlopen("http://baidu.com") html = response.read() print html 进一步，可以request impor ...
分类：
编程语言 时间：
2018-07-23 11:06:47
阅读次数：
155
网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。 Python标准库中提供了：urllib、urllib2、httplib等模块以供Http请求 ...
分类：
编程语言 时间：
2018-07-21 14:53:08
阅读次数：
170
#coding:utf8 import requests import Image import cStringIO import imghdr import urllib2 import ssl import urllib import sys import json import time re... ...
分类：
其他好文 时间：
2018-07-20 00:24:50
阅读次数：
564
在Python2中有urllib2和urllib3两个库来实现请求的发送，在Pyhon3中则统一为urllib。 urilib包含以下4个模块 一 request模块使用方法 1.urlopen() 基本HTTP请求构造方法 返回结果是一个HTTPResponse类型的对象，主要包含read()，r ...
分类：
Web程序 时间：
2018-07-19 10:50:53
阅读次数：
210
requests Python标准库中提供了：urllib、urllib2、httplib等模块以供Http请求，但是，它的 API 太渣了。它是为另一个时代、另一个互联网所创建的。它需要巨量的工作，甚至包括各种方法覆盖，来完成最简单的任务。 Requests 是使用 Apache2 License ...
分类：
其他好文 时间：
2018-07-18 23:20:02
阅读次数：
133
最近晚上学习爬虫，首先从基本的开始； python3 将urllib,urllib2集成到urllib中了, urllib可以对指定的网页进行请求下载， beautifulsoup 可以从杂乱的html代码中 分离出我们需要的部分； 注： beautifulsoup 是一种可以从html 或XML文 ...
分类：
编程语言 时间：
2018-07-16 22:16:50
阅读次数：
177
Handler处理器 和 自定义Opener opener是 urllib2.OpenerDirector 的实例，我们之前一直都在使用的urlopen，它是一个特殊的opener（也就是模块帮我们构建好的）。 但是基本的urlopen()方法不支持代理、cookie等其他的HTTP/HTTPS高级 ...
分类：
编程语言 时间：
2018-07-14 14:56:03
阅读次数：
154
# -*-coding:utf-8-*-
import redis
import urllib2
import json
import smtplib
import time
from qcloudsms_py import SmsMultiSender
from qcloudsms_py.http
分类：
编程语言 时间：
2018-06-29 16:29:07
阅读次数：
204
简介 Python标准库中提供了：urllib、urllib2、httplib等模块以供Http请求，但是，它的 API 太渣了。它是为另一个时代、另一个互联网所创建的。它需要巨量的工作，甚至包括各种方法覆盖，来完成最简单的任务。 Requests 是使用 Apache2 Licensed 许可证的 ...
分类：
其他好文 时间：
2018-06-26 01:13:38
阅读次数：
345
# _*_ coding:utf-8 _*_import urllib2import cookielibimport randomimport refrom bs4 import BeautifulSoupimport datetimedax = datetime.datetime.now().st ...
分类：
编程语言 时间：
2018-06-17 23:25:16
阅读次数：
286
