# coding = utf-8 """ 解析https://www.kuaidaili.com/free/网站里的代理地址, 并测试是否可用 """ import re import time import urllib.request def downHtml(url, retry=3): ""... ...
分类:
Web程序 时间:
2018-05-05 12:34:17
阅读次数:
225
一、快速安装 使用Ctrl+`快捷键或者通过View->Show Console菜单打开命令行,粘贴如下代码(注意下面代码为一行): 1 按下enter键,稍等即可, 安装完毕后,重启sublime,此时就可以在Preferences菜单下看到Package Settings和Package Con ...
分类:
其他好文 时间:
2018-05-05 11:54:06
阅读次数:
196
昨天晚上无聊时,想着练习一下Python所以写了一个小爬虫获取小刀娱乐网里的更新数据 [python] view plain copy #!/usr/bin/python # coding: utf-8 import urllib.request import re #定义一个获取网页源码的子程序 ...
分类:
编程语言 时间:
2018-05-03 16:30:38
阅读次数:
174
Python 3.x 标准库 urllib提供了 rullib.request、urllib.response、urllib.parse 和 urllib.error 4个模块,很好地支持了网页内容读取功能。 下面的代码演示了如何读取并显示指定网页的内容。 下面的代码演示了如何使用GET方法读取并显 ...
分类:
Web程序 时间:
2018-05-03 11:36:39
阅读次数:
254
Request 在我们第一个例子里,urlopen()的参数就是一个url地址; 但是如果需要执行更复杂的操作,比如增加HTTP报头,必须创建一个 Request 实例来作为urlopen()的参数;而需要访问的url地址则作为 Request 实例的参数。 浏览器 就是互联网世界上公认被允许的身份 ...
分类:
编程语言 时间:
2018-05-03 00:59:53
阅读次数:
202
1、爬虫 import re from urllib.request import urlopen def getPage(url): response = urlopen(url) return response.read().decode('utf-8') def parsePage(s): c ...
分类:
其他好文 时间:
2018-05-02 19:20:39
阅读次数:
116
functools模块可以作用于所有的可以被调用的对象,包括函数 定义了__call__方法的类等 1 functools.cmp_to_key(func) 将比较函数(接受两个参数,通过比较两个参数的大小返回负值,0,或者正数)转换为key function(返回一个值用来比较或者排序的可调用对象 ...
分类:
编程语言 时间:
2018-05-02 15:58:54
阅读次数:
213
# from urllib import request## f=request.urlopen("http://123.178.101.29:81/xs_main.aspx?xh=201512102028")## result=str(f.read(),encoding='gb2312')# pr ...
分类:
编程语言 时间:
2018-04-30 13:26:34
阅读次数:
236
一、flask实现的分页组件 from urllib.parse import urlencode,quote,unquote class Pagination(object): """ 自定义分页 """ def __init__(self,current_page,total_count,bas ...
分类:
其他好文 时间:
2018-04-29 12:05:55
阅读次数:
206