今天同事给了6W多个IP叫我查出ISP和归属地,果断用pythonurllib2搞之,数据库用是淘宝的API接口#!/usr/bin/python
#coding:utf-8
importurllib2
importjson
importtime
url=‘http://ip.taobao.com/service/getIpInfo.php?ip=‘
defcheckTaobaoIP(ip):
try:
response=urllib2...
分类:
编程语言 时间:
2014-08-01 20:06:12
阅读次数:
256
1.0 安装subtext2 后在view点击下拉菜单 弹出下拉后选择showconsole2.0 在弹出的输入框中执行代码 安装Package Control 功能import urllib2,os; pf='Package Control.sublime-package'; ipp=sub...
分类:
其他好文 时间:
2014-07-28 14:38:43
阅读次数:
180
Sublime插件:Sublime有好几种安装插件的方法,但是最好用也是最长用的是ctrl+shift+p。第一步: 使用ctrl+` 调出Sublime控制台,在控制台中输入 import urllib2,os;pf='Package Control.sublime-package';ipp=s....
分类:
其他好文 时间:
2014-07-26 14:42:00
阅读次数:
201
cookielib是一个用于处理客户端HTTPcookie的模块https://docs.python.org/2/library/cookielib.html?highlight=cookielib#cookielibIn[191]:importcookielib,urllib2
In[192]:cj=cookielib.CookieJar()
In[193]:openner=urllib2.build_opener(urllib2.HTTPCookieProcessor(cj..
分类:
编程语言 时间:
2014-07-24 23:46:54
阅读次数:
313
之前使用scrapy实现了一个超级简单的爬虫工具,用于抓取豆瓣上面所有的编程书籍信息(由于不需要爬取整个页面的所以链接,所以不需要用到BFS or DFS,只实现顺序抓取下一页) 这次使用的是python自带的urllib 和urllib2等python模块实现,同样以豆瓣上面的爱情电影信息作...
分类:
编程语言 时间:
2014-07-22 22:47:35
阅读次数:
347
需要使用urllib2库import urllib2def download(url, szFileName = ""): #szFileName:下载文件到的目标路径 if szFileName == "": szFileName = url[url.rfind('/') + ...
分类:
编程语言 时间:
2014-07-22 22:41:13
阅读次数:
249
1. urlopen可以给一个Request Object返回一个response object,read()读取相应对象的内容,这时候的print(the_page)可以输出网页的html内容1 import urllib22 3 req = urllib2.Request('http://www...
分类:
编程语言 时间:
2014-07-20 09:03:38
阅读次数:
301
一 不需要登录的import urllib2content = urllib2.urlopen('http://XXXX').read() 二 使用代理import urllib2proxy_support = urllib2.ProxyHandler({'http':'http://XX.XX.....
分类:
编程语言 时间:
2014-07-16 17:58:39
阅读次数:
226
分享下Python库urllib与urllib2用法区别,初学python的同学常有此困惑,今天一揭谜底。学习Python,一直不明白urllib和urllib2的区别,以为2是1的升级版。今天看到老外写的一篇《Python: difference between urllib and urllib...
分类:
编程语言 时间:
2014-07-15 08:31:38
阅读次数:
232
httplib模块是一个专门用于http的模块,urllib和urllib2也都是基于对它进行了更上层次的封装我记得刚开始的时候,公司用的cdn有段时间抽风,全球40多个节点总是有那么几个节点不同步,导致玩家加载的是老的活动图片,玩家在论坛抱怨,国外的玩家抱怨,那可不像国内的(客服MM万篇一律:您的...
分类:
其他好文 时间:
2014-07-13 21:59:53
阅读次数:
432