一、 浏览网页的时候,发送的请求。服务器反回来的永远是字符串,由于服务器后台使用的语言不通,所以就需要用工具反解,这里用到了json json方法一 json.loads()将字符串转化为python的基本数据类型(内部必须是双引号) 中国天气网城市代码网络接口来 代码实现: json.dumps( ...
分类:
Web程序 时间:
2017-02-20 11:15:27
阅读次数:
521
版本:Python3.x 运行系统:win7 编辑器:pycharm 爬取页面:携程的一个页面(韩国首尔6日5晚半自助游·直飞+滑雪场或南怡岛+乐天世界+1天自由活动-【携程旅游】) ...
分类:
编程语言 时间:
2017-02-18 14:16:58
阅读次数:
255
Requests 是用Python语言编写,基于 urllib,采用 Apache2 Licensed 开源协议的 HTTP 库。它比 urllib 更加方便,可以节约我们大量的工作,完全满足 HTTP 测试需求。Requests 的哲学是以 PEP 20 的习语为中心开发的,所以它比 urllib ...
分类:
编程语言 时间:
2017-02-17 13:50:23
阅读次数:
261
1.urllib.urlopen(url[,data[,proxies]]) 打开一个url的方法,返回一个文件对象,然后可以进行类似文件对象的操作。本例试着打开google 1 #coding:UTF8 2 3 import urllib 4 response = urllib.urlopen(" ...
分类:
编程语言 时间:
2017-02-17 11:09:25
阅读次数:
1475
1、ModuleNotFoundError: No module named 'urllib2' 在python3.x版本中,urllib和urllib2包集合成在一个包了import urllib2response = urllib2.urlopen(request)改为import urllib ...
分类:
编程语言 时间:
2017-02-15 19:03:55
阅读次数:
420
在史蒂芬周下载破解版 安装package control import urllib.request,os,hashlib; h = 'df21e130d211cfc94d9b0905775a7c0f' + '1e3d39e33b79698005270310898eea76'; pf = 'Pack... ...
分类:
系统相关 时间:
2017-02-13 21:54:17
阅读次数:
221
Python文件夹下图像数据可视化 import matplotlib.pyplot as plt import matplotlib.image as mpimg import numpy as np import urllib2 import urllib import os import sh... ...
分类:
编程语言 时间:
2017-02-13 20:34:57
阅读次数:
233
#-*-coding:utf-8-*-
fromdjango.httpimportHttpResponse
fromdjango.httpimportHttpResponseRedirect
fromdjango.shortcutsimportrender_to_response
importurllib2,urllib
importtime
importre
try:
importjson
exceptImportError:
importsimplejsonasjson
#classSaltAPI(o..
PS: 1、爬取的内容里面还有链接没有处理干净,虽然别人给了个源码,但是自己看不懂!(还要加油!↖(^ω^)↗↖(^ω^)↗) 2、视频里面说要模拟浏览器登入,但是我这里没有模拟还是可以正常的爬取(我用的是Python3) ...
分类:
编程语言 时间:
2017-02-11 20:43:37
阅读次数:
215