1、urllib.request.urlretrieve可以根据文件的URL下载文件：#-*-coding:utf-8-*-fromurllib.requestimporturlretrievefromurllib.requestimporturlopenfrombs4importBeautifulSouphtml=urlopen("http://www.pythonscraping.com/")
分类：
编程语言 时间：
2018-04-29 11:49:41
阅读次数：
166
（一） URL地址 URL地址组件 URL组件 说明 scheme 网络协议或下载方案 net_loc 服务器所在地（也许含有用户信息） path 使用（/）分割的文件或CGI应用的路径 params 可选参数 query 连接符（&）分割的一系列键值对 fragment 指定文档内特定锚的部分 n ...
分类：
编程语言 时间：
2018-04-28 22:13:41
阅读次数：
207
import urllib.request import json,requests #urlib模块，不常用 url = 'http://api.nnzhp.cn/api/user/stu_info?stu_name=小黑马' res=urllib.request.urlopen(url) jie... ...
分类：
编程语言 时间：
2018-04-27 13:31:15
阅读次数：
162
参考:https://blog.csdn.net/tanlangqie/article/details/79506543 1 # -*- coding:utf-8 -*- 2 import urllib 3 import urllib.request 4 import re 5 6 def getH... ...
分类：
编程语言 时间：
2018-04-26 19:57:27
阅读次数：
183
如何快速下载贴吧图片呢？#!/usr/bin/python
# -*- coding: UTF-8 -*-
import urllib
import re
def getHtml(url):
page = urllib.urlopen(url)
&
分类：
编程语言 时间：
2018-04-26 15:32:56
阅读次数：
164
网络爬虫 又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者，是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。 （参考百度百科，详细请见https://baike.baidu.com/item/网络爬虫/51 ...
分类：
编程语言 时间：
2018-04-26 01:07:42
阅读次数：
303
# -*- coding:utf-8 -*- # Author：Brownyangyang from urllib import request def f(url): print('GET:%s' % url) resp = request.urlopen(url) data = resp.rea... ...
分类：
其他好文 时间：
2018-04-25 00:49:07
阅读次数：
155
#asyncio 没有提供http协议的接口 aiohttp import asyncio import socket from urllib.parse import urlparse async def get_url(url): #通过socket请求html url = urlparse(u... ...
分类：
Web程序 时间：
2018-04-24 23:25:14
阅读次数：
431
什么是Requests Requests是用python语言基于urllib编写的，采用的是Apache2 Licensed开源协议的HTTP库，但他比urllib更加方便，可以完全替代urllib。一句话，requests是python实现的最简单易用的HTTP库，建议爬虫使用requests库。 ...
分类：
其他好文 时间：
2018-04-22 20:10:27
阅读次数：
212
1.目标：用python3爬取慕课网课程页的图片，然后保存到本地。 2。打开pycharm编写python代码。思路如下： 2.1 . 从urllib库里导入request模块。 2.2 用request模块下的urlopen方法打开网页获取一个http响应对象 2.3 响应对象调用.read()方 ...
分类：
编程语言 时间：
2018-04-22 13:58:10
阅读次数：
147
