一、Http协议 二、Https协议 三、使用Python获取数据 （1）urlib （2）GET请求 （3）POST请求 四、爬取豆瓣电影实战 1.思路 （1）在浏览器中输入https://movie.douban.com/j/search_tags?type=movie会得到显示的电影的分类标签 ...
分类：
数据库 时间：
2018-08-10 13:18:14
阅读次数：
228
经常在使用python的时候需要安装各种模块，而pip是很强大的模块安装工具，但是由于国外官方pypi经常被墙，导致不可用，所以我们最好是将自己使用的pip源更换一下，这样就能解决被墙导致的装不上库的烦恼。 网上有很多可用的源，例如豆瓣：http://pypi.douban.com/simple/ ...
分类：
其他好文 时间：
2018-08-10 01:20:48
阅读次数：
195
1.点击此电脑，在最上面的的文件夹窗口输入 ： %APPDATA% 2.按回车跳转到以下目录，新建pip文件夹 3.创建pip.ini文件 4.打开文件夹，输入以下内容，关闭即可（注意：源镜像可替换） 5.国内源镜像有： V2EX：http://pypi.v2ex.com/simple豆瓣：http ...
分类：
编程语言 时间：
2018-08-08 22:55:54
阅读次数：
349
pip更改国内源国内源：豆瓣：http://pypi.douban.com/simple/清华：https://pypi.tuna.tsinghua.edu.cn/simple阿里云:http://mirrors.aliyun.com/pypi/simple/中国科技大学:https://pypi.mirrors.ustc.edu.cn/simple/中国科学技术大学:http://pypi.mi
分类：
其他好文 时间：
2018-08-06 21:42:04
阅读次数：
967
原文：https://mp.weixin.qq.com/s?__biz=MzIxNDExNjAyNw==&mid=2650338837&idx=1&sn=c189ec67024687dc72818a4230b7c525 微博网友@ -美年达芬奇 （豆瓣ID“独钓寒江雪”）7月30日发现，凌晨她的手机 ...
分类：
移动开发 时间：
2018-08-06 00:39:17
阅读次数：
293
通过豆瓣API可以获取很多电影、书籍的数据信息，今天在调用豆瓣正在上映电影接口的时候报403错误，原因是豆瓣设置了小程序的访问权限。如下： 解决方法是使用代理，将豆瓣API地址换成 https://douban.uieee.com，但是，悲催的是又报了400（bad request）错误，如下： 接 ...
分类：
微信 时间：
2018-08-05 22:27:33
阅读次数：
305
2018-08-03 # 阿里云 http://mirrors.aliyun.com/pypi/simple/ # 中国科技大学 https://pypi.mirrors.ustc.edu.cn/simple/ #豆瓣(douban) http://pypi.douban.com/simple/ # ...
分类：
编程语言 时间：
2018-08-03 14:32:49
阅读次数：
1801
网址：https://www.douban.com/doulist/45940373/ webgl 来自: Pasu 2017-04-17创建 2017-07-25更新 推荐 关注 2 人关注 全部(8) · 图书(8) 来自：豆瓣读书 OpenGL Insights (8人评价) 作者: Patr ...
分类：
Web程序 时间：
2018-08-01 12:10:15
阅读次数：
224
1. 创建爬虫项目douban 2. 设置items.py文件，存储要保存的数据类型和字段名称 3. 设置爬虫文件doubanmovies.py coding: utf 8 import scrapy from douban.items import DoubanItem class Doubanm ...
分类：
数据库 时间：
2018-08-01 00:25:22
阅读次数：
246
