#Python爬取网页的三种方法之一:使用urllib或者urllib2模块的getparam方法importurllibfopen1=urllib.urlopen(‘http://www.baidu.com‘).info()fopen2=urllib2.urlopen(‘http://www.sina.com‘).info()printfopen1.getparam(‘charset‘)printfopen2.getparam(‘charset‘)#----有些..
分类：
编程语言 时间：
2016-10-22 01:09:26
阅读次数：
693
httplib模块实现了HTTP和HTTPS的客户端部分，但是一般不直接使用，经常通过urllib来进行HTTP，HTTPS的相关操作。 如果需要查看其源代码可以通过查找命令定位： 整个请求过程的状态转移图如下所示： httplib提供如下的类： 1. httplib.HTTPConnection( ...
分类：
编程语言 时间：
2016-10-17 20:13:45
阅读次数：
271
我使用的Sublime插件及配置增强型插件Package Control快捷键ctrl+~,调出命令行，运行：import urllib.request,os,hashlib; h = '2915d1851351e5ee549c20394736b442' + '8bc59f460fa1548d151... ...
分类：
其他好文 时间：
2016-10-16 19:46:49
阅读次数：
1571
背景： 学校的网站可以根据学号查学生姓名和成绩，所以我希望通过Python的爬虫得到年级所有同学的学号与姓名对应表。 实现： 首先需要算出所有学生的学号以方便查询。接下来要把学号和考试场次包装成待会要填入的信息，这可以用urllib模块里的函数urlencode完成。之后要访问网站，先用urllib ...
分类：
编程语言 时间：
2016-10-16 16:31:52
阅读次数：
240
溜达豆瓣的时候，发现一些图片，懒得一个一个扒，之前写过c#和python版本的图片下载，因此拿之前的Python代码来改了改，折腾出一个豆瓣版本，方便各位使用 # -*- coding:utf8 -*- import urllib2, urllib, socket import re import ...
分类：
编程语言 时间：
2016-10-07 11:15:36
阅读次数：
215
原文链接：http://www.cnblogs.com/yuxc/ 作为一个Python菜鸟，之前一直懵懂于urllib和urllib2，以为2是1的升级版。今天看到老外写的一篇《Python: difference between urllib and urllib2》才明白其中的区别。 You ...
分类：
编程语言 时间：
2016-10-03 00:21:14
阅读次数：
228
.sumblime text 中的package control 插件包控件的安装步骤一： Ctrl+` 调出console 粘贴代码： import urllib.request,os; pf = 'PackageControl.sublime-package'; ipp = sublime.in ...
分类：
其他好文 时间：
2016-09-29 20:26:55
阅读次数：
164
原文 三种Python下载url并保存文件的代码 利用程序自己编写下载文件挺有意思的。 Python中最流行的方法就是通过Http利用urllib或者urllib2模块。 当然你也可以利用ftplib从ftp站点下载文件。此外Python还提供了另外一种方法requests。 来看看三种方法是如何来 ...
分类：
编程语言 时间：
2016-09-29 02:08:29
阅读次数：
185
利用程序自己编写下载文件挺有意思的。Python中最流行的方法就是通过Http利用urllib或者urllib2模块。当然你也可以利用ftplib从ftp站点下载文件。此外Python还提供了另外一种方法requests。 来看看三种方法是如何来下载zip文件的： ...
分类：
编程语言 时间：
2016-09-27 14:56:21
阅读次数：
190
今天在麦子学院看了教学视频之后，发现收益颇丰，因而做了一下学习笔记（毕竟是第一次写，感觉有点low）。 以下是我照着老师敲的代码： # coding:utf-8import urllib def print_list(list): # 获取的网页源码按行输出 for i in list: print ...
分类：
编程语言 时间：
2016-09-24 00:46:09
阅读次数：
191
