现在Python基本入门了,现在开始要进军如何写爬虫了!先把最基本的urllib模块弄懂吧。urllib模块中的方法1.urllib.urlopen(url[,data[,proxies]])打开一个url的方法,返回一个文件对象,然后可以进行类似文件对象的操作。本例试着打开google>>> .....
分类:
编程语言 时间:
2016-01-11 18:03:06
阅读次数:
241
参考学习:http://www.blogjava.net/ashutc/archive/2011/03/21/346695.html1.urllib.quote()函数模拟登录时,对用户名进行处理:1 def GetUserName(userName):2 userNameTemp = ur...
分类:
编程语言 时间:
2015-12-08 18:17:31
阅读次数:
1378
python3.5中把python中的urllib和urllib2模块合并为urllib模块啦。urllib模块下有五个类: 抓取指定URL下内容封装成一个类文件对象,其中的很多方法操作和文件操作是一样的。
分类:
编程语言 时间:
2015-10-21 09:22:33
阅读次数:
280
1httplib简介httplib是python中http协议的客户端实现,可以使用该模块来与HTTP服务器进行交互httplib是一个相对底层的http请求模块,其上有专门的包装模块,如urllib内建模块,goto等第三方模块,但是封装的越高就越不灵活,比如urllib模块里请求错误时就不会返回结果页的内容..
分类:
编程语言 时间:
2015-09-24 11:07:15
阅读次数:
199
ORM:就是类似于Django的models,我们可以不用SQL语句去操作数据库;只需要操作对象的属性和方法。先安装peewee,我是在Ubuntu的环境下:sudo pip install peewee(1)urllib 模块(2)@property的使用:把方法变为属性,前端页面可以直接调用(t...
分类:
编程语言 时间:
2015-09-09 13:19:59
阅读次数:
331
引言 Python 的Web 应用:简单的Web 客户端 urlparse 和 urllib 模块 高级的 Web 客户端 网络爬虫/蜘蛛/机器人 CGI:帮助 Web 服务器处理客户端数据 创建 CGI 应用程序 在 CGI 中使用Unicode 高级 CGI...
分类:
编程语言 时间:
2015-08-21 19:17:51
阅读次数:
408
仅以此纪念python标准库学习!翻译什么会有不顺或者错误,见谅啦。。。。 后边为案例。#coding:utf-8import urllib"""本模块提供了通过万维网抓取数据的高级接口。尤其是,urlopen()函数和内置的open()相似,只是接受的参数为Urls,而不是文件名称。有一些限制:该...
分类:
编程语言 时间:
2015-08-11 15:58:52
阅读次数:
172
来源http://my.oschina.net/u/999436/blog/113317我尝试着找找python3.3.0的change log。里面并没有找到urllib的修改记录。然而这一修改记录却在python3.0的change log中。原文是这样写的:a newurllibpackage...
分类:
编程语言 时间:
2015-07-31 19:57:18
阅读次数:
126
#-*-coding:utf-8-*-
#urllib用于访问不需要验证的网络资源
#urllib.urlretrave(url,tempfile,functionLodingProcess,[form_data])提供了下载资源的功能。所需参数如其名,
#不给定临时文件时,自动生成,返回文件名,和执行信息。
#get和post是http的两种常用的方法,get--&g..
分类:
编程语言 时间:
2015-07-28 14:51:49
阅读次数:
201
一.urllib模块介绍importurllib先看个小例子,打印结果为一个socket连接示例一:importurllib
url=r‘http://www.baidu.com‘
fp=urllib.urlopen(url)
printfp>>><addinfourlat43317888whosefp=<socket._fileobjectobjectat0x02947530>>>>>1.基本..
分类:
编程语言 时间:
2015-07-28 06:46:56
阅读次数:
178