1.到golang.org下载golang 并安装。2.安装sublimetext ,打开之后 按ctrl+` 打开命令行,输入以下内容:import urllib2,os; pf='Package Control.sublime-package'; ipp=sublime.installed_pa...
分类:
系统相关 时间:
2016-01-10 01:36:06
阅读次数:
214
1.最基本的抓站import urllib2content = urllib2.urlopen('http://XXXX').read()2.使用代理服务器这在某些情况下比较有用,比如IP被封了,或者比如IP访问的次数受到限制等等。import urllib2proxy_support = urll...
分类:
编程语言 时间:
2016-01-08 09:21:12
阅读次数:
201
#!/usr/bin/env python#encoding=utf-8 import cStringIO, urllib2, Image url = 'http://www.bz55.com/uploads/allimg/150309/139-150309101A0.jpg'file = urll...
分类:
编程语言 时间:
2016-01-07 13:18:18
阅读次数:
183
urllib2I. urllib2模块定义的函数和类用来获取URL(主要是HTTP的),他提供一些复杂的接口用于处理: 基本认证,重定向,Cookies等。 II. 常用方法和类 II.1 urllib2.urlopen(url[, data][, timeout]) #传url时候,用法同urll...
分类:
编程语言 时间:
2016-01-06 17:48:15
阅读次数:
350
最近在使用python做接口测试,发现python中http请求方法有很多种,现汇总如下:一、python自带库----urllib2python自带库urllib2使用的比较多,简单使用如下:import urllib2response = urllib2.urlopen('http://loca...
分类:
编程语言 时间:
2016-01-06 11:58:53
阅读次数:
202
如何发送数据和加入多个header字段request=urllib2.Request(url)
request.add_header("Content-Type","application/json;charset=UTF-8")
request.add_header("User-Agent","user_agent")
data={‘name‘:‘aaa‘,‘location‘:‘bbb‘}
post_data=urllib.urlencode(data)
response=u..
分类:
编程语言 时间:
2016-01-05 01:36:26
阅读次数:
207
这些是几年前用过的一些方法,以前都是用过就丢掉了,现在翻出来记录一下。import httplibimport urllib2import socket##--------------------------------------------------------用httplib进行GET请.....
分类:
Web程序 时间:
2016-01-04 13:15:13
阅读次数:
224
混合模式结合二、三两大步,通过模拟点击快速拿到cookie,虽然效率低,但可以减少数据包分析的时间以及解决搞不定ajax登陆验证的烦恼,然后继续用urllib2拼接cookie继续快速获取数据。分下面两步:a. 从selenium中拿到cookieb. 添加cookie给urllib2使用方法1:使...
分类:
其他好文 时间:
2016-01-04 11:36:58
阅读次数:
158
登陆之数据包分析工具: python-urllib2 | firefox+firebug或者chrome,用浏览器打开登陆页面之后,按F12键会默认打开开发者工具或者启动firebug,点击network监听数据包,下面以itune的登陆举一个例子。1. 在浏览器中输入itunes的登陆地址:htt...
分类:
其他好文 时间:
2016-01-04 11:31:08
阅读次数:
356
初步爬取糗事百科第一页段子(发布人,发布内容,好笑数和评论数) 1 #-*-coding:utf-8-*- 2 import urllib 3 import urllib2 4 import re 5 page = 1 6 url ='http://www.qiushibaike.com/hot/p...
分类:
编程语言 时间:
2016-01-02 16:23:20
阅读次数:
173