1 # -*- coding:utf-8 -*- 2 ''' 3 抓取豆瓣电影某部电影的评论 4抓取电影 5 网址链接:https://movie.douban.com/subject/26630781/comments 6 为了抓取全部评论需要先进行登录 7 ''' 8 from selenium ...
分类：
编程语言 时间：
2019-04-06 12:41:16
阅读次数：
265
另附豆瓣技术贴:https://www.douban.com/note/315222037/ 1、php-fpm优化参数介绍他们分别是：pm、pm.max_children、pm.start_servers、pm.min_spare_servers、pm.max_spare_servers。pm：表 ...
分类：
Web程序 时间：
2019-04-02 12:22:08
阅读次数：
786
本文来自：https://www.douban.com/note/362268947/ Sublime Text 3 快捷键总结（拿走） 本文来自：https://www.douban.com/note/362268947/ Sublime Text 3 快捷键总结（拿走） 以下是个人总结不完全的快 ...
分类：
其他好文 时间：
2019-03-25 14:36:51
阅读次数：
165
阿里云 http://mirrors.aliyun.com/pypi/simple/ 中国科技大学 https://pypi.mirrors.ustc.edu.cn/simple/ 豆瓣(douban) http://pypi.douban.com/simple/ 清华大学 https://pypi ...
分类：
编程语言 时间：
2019-03-24 09:22:41
阅读次数：
157
1 import requests 2 3 url = "https://movie.douban.com/cinema/nowplaying/changsha/" 4 proxy = { 5 'HTTP': '116.209.53.143:9999' 6 } 7 headers = { 8 'Us ...
分类：
其他好文 时间：
2019-03-10 20:31:45
阅读次数：
206
windows系统： 1.用户目录下新建pip目录 2.vi pip.ini [global] timeout=600 index-url = http://pypi.douban.com/simple [install] trusted-host=pypi.douban.com Linux系统：p... ...
pip install virtualenv 直接安装对应的版本 pip install -i https://pypi.douban.com/simple/ django 使用国内镜像加速安装 virtualenv scrapytest 创建虚拟环境 pip install virtualenvw ...
分类：
编程语言 时间：
2019-03-03 09:16:03
阅读次数：
217
一、问题描述 有时候用scrapy shell来调试很方便,但是有些网站有防爬虫机制,所以使用scrapy shell会返回403,比如下面 C:\Users\fendo>scrapy shell https://book.douban.com/subject/26805083/2017-04-17 ...
分类：
系统相关 时间：
2019-02-27 14:31:12
阅读次数：
230
2018： https://movie.douban.com/awards/cannes/71/nominees?k=a 2017： https://movie.douban.com/awards/cannes/70/nominees?k=a ...
分类：
其他好文 时间：
2019-02-27 01:38:15
阅读次数：
295
2018： https://movie.douban.com/awards/emmys/70/nominees?k=a 2017： https://movie.douban.com/awards/emmys/69/nominees?k=a 2016： https://movie.douban.com ...
分类：
其他好文 时间：
2019-02-27 01:24:59
阅读次数：
230
