前言 在我的任务清单中，很早就有了一个文件下载器，但一直忙着没空去写。最近刚好放假，便抽了些时间完成了下文中的这个下载器。 介绍 同样的，还是先上效果图吧。 Jar包地址位于 "FileDownloader" 目前实现的主要功能有： 多线程下载 断点续传 自定义头部等 即将完成的包括： 添加代理功能 ...
分类：
编程语言 时间：
2019-07-21 16:18:10
阅读次数：
184
1. github上好用的非代码工具 1.1. 面试题地址 1. "地址" 1.2. 书籍 1. "这里" 1.3. 百度网盘不限速下载器 1. "这里" ...
分类：
其他好文 时间：
2019-07-21 01:36:38
阅读次数：
88
运行结果如下 D:\python\Python3\python.exe D:/project/python/zj_scrapy/zj_scrapy/SyncCrawlSjqq.py ['宜人贷借款', '大智慧', '中国建设银行', '同花顺手机炒股股票软件', '随手记理财记账', '平安金管家 ...
分类：
其他好文 时间：
2019-07-16 18:41:18
阅读次数：
118
下载 https://www.lanzous.com/i4o9cfe 原文 https://www.52pojie.cn/thread-937461-1-1.html ...
分类：
其他好文 时间：
2019-07-13 09:28:50
阅读次数：
131
乐影音下载器6.6（2019 3 21）能下载 "国内视频网站" 上面的视频。 你只需要复制视频网址就能自动帮你下载视频，这是你唯一需要做的！ 下载： "官方下载" & ...
分类：
其他好文 时间：
2019-07-01 18:39:50
阅读次数：
105
大圣文库下载器是一款下载文库资源的软件，它具有强大的下载功能，可以下载百度文库、豆丁文库等文库的资源，而且都是免费下载，不收取任何的积分，让用户轻松下载到自己需要的文库资源。大圣文库下载器的使用方法十分的简单，只需将文档网址复制到软件内，点击下载提取即可。 大圣文库下载器的下载速度十分快速，只需几秒 ...
分类：
其他好文 时间：
2019-06-29 22:14:03
阅读次数：
98
服务器 参考代码如下: 客户端 参考代码如下: ...
分类：
其他好文 时间：
2019-05-23 09:33:09
阅读次数：
147
使用UA池和代理池的目的是: 防止爬取网站的反爬虫策略.那么UA池和代理池在scrapy框架中是如何应用的呢? 我们先了解下scrapy的下载中间件. scrapy框架图: 下载中间件（Downloader Middlewares） 是位于scrapy引擎和下载器之间的一层组件。 - 作用： （1） ...
分类：
其他好文 时间：
2019-05-08 21:34:20
阅读次数：
554
[TOC] UA池和代理池 一. 下载代理池 下载中间件（Downloader Middlewares） 位于scrapy引擎和下载器之间的一层组件。 作用： （1）引擎将请求传递给下载器过程中， 下载中间件可以对请求进行一系列处理。比如设置请求的 User Agent，设置代理等 （2）在下载器完 ...
分类：
其他好文 时间：
2019-05-04 18:46:38
阅读次数：
130
前言 最近在开发订单对账系统，先从各种支付平台获取订单销售数据，然后与公司商城订单数据进行对账兜底。总体上，各个支付平台提供数据的方式分为两类，一般以接口的方式提供实时数据，比如：webservice、NVP、restfull api，以文件服务的方式提供周期性数据，比如：SFTP。接口的方式比较简 ...
分类：
Web程序 时间：
2019-04-28 09:55:32
阅读次数：
190
