实例需求：运用python语言爬取http://kaijiang.zhcw.com/zhcw/html/ssq/list_1.html这个开奖网站所有的信息，并且保存为txt文件。 实例环境：python3.7 BeautifulSoup库、XPath(需手动安装) urllib库(内置的pytho ...
分类：
编程语言 时间：
2019-01-02 23:33:13
阅读次数：
308
对于互联网数据，Python 有很多处理网络协议的工具，urllib 是很常用的一种。 一、urllib.request，request 可以很方便的抓取 URL 内容。 urllib.request.urlopen(url) 返回请求 url 后的二进制对象· 参数：url=‘http://www ...
分类：
编程语言 时间：
2019-01-02 15:07:41
阅读次数：
290
Sublime Text 3 常用插件以及安装方法(vue 插件) 使用Package Control组件安装 也可以安装package control组件，然后直接在线安装： 按Ctrl+` 调出console 粘贴以下代码到底部命令行并回车： { import urllib.request,os ...
分类：
其他好文 时间：
2018-12-31 19:08:26
阅读次数：
160
import json import urllib import arcpy def getAddress(lng,lat): url= 'http://restapi.amap.com/v3/geocode/regeo?key=9f8bd8c2574ed9000d1e995b894c4c12&lo... ...
分类：
编程语言 时间：
2018-12-30 15:36:15
阅读次数：
411
小编大约于这个月月初写的这一份代码，但很不幸，大概20号，再次找百度图片翻页流的时候，发现是瀑布流且回不去了，还好代码里面留了翻页流的网址 所以，现在来分享给大家。 语言：python3.6 库：requests， re， urllib 除了requests需要pip install之外，其他两个是 ...
分类：
其他好文 时间：
2018-12-28 22:10:58
阅读次数：
330
小编大约于这个月月初写的这一份代码，但很不幸，大概20号，再次找百度图片翻页流的时候，发现是瀑布流且回不去了，还好代码里面留了翻页流的网址 所以，现在来分享给大家。 语言：python3.6 库：requests， re， urllib 除了requests需要pip install之外，其他两个是 ...
分类：
其他好文 时间：
2018-12-28 21:14:38
阅读次数：
231
requests库比urllib跟家方便操作Cookie、登录验证、代理设置等； 例如： 除了get方法以外，可以通过post、put、delete、head、options方法实现不同方式的请求； 注意：上面如果相应结果不是json格式，则r.json（）方法会报异常错误； 抓取一个网页，例如： ...
分类：
编程语言 时间：
2018-12-28 16:05:19
阅读次数：
632
1，请求：requests requests.get(url, headers) requests.post(url, data=data, files=files) urllib模块: Python2 import urllib2 response = urllib2.urlopen('http: ...
分类：
编程语言 时间：
2018-12-28 12:03:29
阅读次数：
177
1、使用urllib模块(使用不方便，建议使用第二种) get请求： res = urlopen(url) post请求： 注意：带参数的时候是一个post请求，若http://127.0.0.1:8999/api/login接口的方法限定了methods为get，则会报错urllib.error. ...
分类：
编程语言 时间：
2018-12-27 18:49:31
阅读次数：
329
import re import os import urllib #根据给定的网址来获取网页详细信息，得到的html就是网页的源代码 def getHtml(url): page = urllib.request.urlopen(url) html = page.read() return htm... ...
分类：
编程语言 时间：
2018-12-27 11:21:35
阅读次数：
180
