增加多线程抓取数据，增加url判断，若数据已抓取，不在重复抓取 （可参考URL管理器） 需要再添加上队列,否则全开 from lxml import etree import requests import time import os import random import urllib3 fr ...
分类：
编程语言 时间：
2020-01-20 18:54:59
阅读次数：
79
from lxml import etree import requests """ 获取章节列表和地址 """ def getContents(): tagret = "https://www.kanunu8.com/files/old/2011/2447.html" req = requests ...
分类：
编程语言 时间：
2020-01-19 19:09:20
阅读次数：
103
题目描述 同一时刻有N位车主带着他们的爱车来到了汽车维修中心。维修中心共有M位技术人员，不同的技术人员对不同的车进行维修所用的时间是不同的。现在需要安排这M位技术人员所维修的车及顺序，使得顾客平均等待的时间最小。 说明：顾客的等待时间是指从他把车送至维修中心到维修完毕所用的时间。 输入格式 第一行有 ...
分类：
其他好文 时间：
2020-01-18 21:34:58
阅读次数：
72
侵删https://www.cnblogs.com/wyh19941210/p/9628532.html 一、元数据的介绍 元数据是用来描述数据的数据（Data that describes other data）。单单这样说，不太好理解，我来举个例子。下面是契诃夫的小说《套中人》中的一段，描写一个 ...
分类：
其他好文 时间：
2020-01-18 10:56:25
阅读次数：
92
据说修习武功乃是逆天而为，读书想必也是如此吧。对于我来说，有乐趣的阅读就仅限于小说和漫画。能边看边敲着键盘实践的编程书也还能勉强坚持看完。但如果是艰深的算法书或某大师的影印版大部头，基本上会是一开始坚持看3小时，第二天再坚持2小时——这也就只7、8页的样子，然后就会想着这样下去1年也看不完呐，不知不 ...
分类：
其他好文 时间：
2020-01-17 19:13:12
阅读次数：
83
阿甘正传 辛德勒名单 肖申克的救赎 勇敢的心 角斗士 美国丽人 教父 指环王 钢琴师 血钻 战争之王 上帝之城（暴力） 拯救大兵瑞恩 西雅图不眠夜 可可西里的美丽传说 廊桥遗梦 放牛班的春天 中央车站 猜火车 低俗小说 华尔街之狼（拜金） ~^o^~ ...
分类：
其他好文 时间：
2020-01-17 13:12:17
阅读次数：
73
写在前面的话 喜欢看小说，平时都是通过电脑或者手机看小说，手机听小说（智能语音），或者喜马拉雅搜索小说听（好多喜欢的都收费o(╥﹏╥)o，然后网上好多免费资源却不能听），想在电脑上听小说，目前Microsoft Edge可以阅读网页文本很赞，不能自动翻译很烦(＃￣～￣＃)，而且智能语音库体验很差，所 ...
爬虫学习18.增量式爬虫 增量式爬虫 引言： 当我们在浏览相关网页的时候会发现，某些网站定时会在原有网页数据的基础上更新一批数据，例如某电影网站会实时更新一批最近热门的电影。小说网站会根据作者创作的进度实时更新最新的章节数据等等。那么，类似的情景，当我们在爬虫的过程中遇到时，我们是不是需要定时更新程 ...
分类：
其他好文 时间：
2020-01-10 22:25:02
阅读次数：
76
准备工作 matplotlib库 三体.txt（utf 8编码） 三体主要人物.txt（utf 8编码） 代码 大纲 导入matplotlib.pyplot方法，创建1个Novel类，包含2个属性和4个方法。 初始化 类包含两个属性，小说名字和主要人物名字。 主要人物来源于《三体》百度百科，以每行一 ...
分类：
编程语言 时间：
2020-01-09 10:33:27
阅读次数：
121
古龙小说里有个设定很特别的人物：百晓生。出自名著《多情剑客无情剑》，因通晓武林之事而得名，曾编写《兵器谱》，对江湖中知名人物的武功和兵器做排名，类似现在的《胡润全球富豪榜》。 善泳者溺，善骑者堕。百晓生做《兵器谱》，其中排名第三的兵器是李寻欢手中的“小李飞刀”。后来百晓生死于小李飞刀之下。 新的一年 ...
分类：
其他好文 时间：
2020-01-06 22:59:09
阅读次数：
91
