在Git配置文件中配置变量，可以控制Git的外观和操作的各个方面。通过git config命令可以获得和设置配置变量。 一、Git配置文件的位置 这些变量可以被存储在三个不同的位置： 1./etc/gitconfig 文件（系统级配置文件）：包含了适用于系统所有用户和所有库的值。如果你传递参数选项’ ...
分类：
其他好文 时间：
2020-03-08 17:59:24
阅读次数：
84
Windows 10 在文件资源管理器中引入了"快速访问"这个功能，每当打开文件资源管理器窗口时，您都会看到常用文件夹和最近访问的文件的列表，这个功能虽然方便了日常使用，可能会提高工作效率，但是如果是公司的电脑，或者电脑不止一个人在用，那么自己想干点啥私密的事情，这样就会被别人直接看见。 那么，下面 ...
在前面几篇文章中我们已经学会了如何了编写Spider去获取网页上所有的文章链接及其对应的网页目标信息。在这篇文章中，我们将主要介绍Scrapy中的Item。 在介绍Item之前，我们需要知道明确一点，网络爬虫的主要目标就是需要从非结构化的数据源中提取出结构化的数据，在提取出结构化的数据之后，怎么将这 ...
分类：
其他好文 时间：
2020-03-07 20:53:06
阅读次数：
74
原文： https://baijiahao.baidu.com/s?id=1601671032391176338&wfr=spider&for=pc 家居杂坛依然首先给出答案：4平方的铜芯电线能带的功率是5500W。 关于这个问题，家居杂坛以前跟大家分析过，在这里再跟大家好好说说一根电线能带多少千瓦 ...
分类：
其他好文 时间：
2020-03-01 12:55:07
阅读次数：
80
目录 1. scrapy安装与环境依赖 2. 创建项目等 命令介绍 3. 项目目录介绍 4. 框架scrapy介绍：五大核心组件与数据流向 5. scrapy 爬取科客网站 6. scrapy实现多页爬取 9. scrapy 篡改请求与响应，item丢弃 10. scrapy中间件 分类，作用 11 ...
分类：
编程语言 时间：
2020-02-29 13:05:14
阅读次数：
246
摘自：https://www.cnblogs.com/Spider-spiders/p/8884729.html 简介 我们程序运行的时候都是放在内存里的、根据静态、成员函数、代码段、对象、等等、放在不同的内存分块里、大概分为5块 1 栈 2 堆 3 BSS段-全局区-（静态区） 4 代码段 5 数 ...
分类：
其他好文 时间：
2020-02-29 12:52:26
阅读次数：
67
font spider 抽字体,出现错误,只抽出ttf文件,而且,大小还是原来的大小 ttf文件格式是直接修改后缀修改的. 不是有效的ttf 文件 ...
分类：
其他好文 时间：
2020-02-26 18:58:33
阅读次数：
110
原理：其实就是用到redis的优点及特性，好处自己查 1，scrapy 分布式爬虫配置： settings.py BOT_NAME = 'first' SPIDER_MODULES = ['first.spiders'] NEWSPIDER_MODULE = 'first.spiders' # Cr ...
分类：
其他好文 时间：
2020-02-26 18:27:52
阅读次数：
83
scrapy快速上手之crawl模板 "前面" 提到过，我们使用了basic作为模板生成了爬虫 现在介绍另外一种模板：crawl 创建项目 首先在命令行界面执行： 后，即可得到提示 You can start your first spider with: cd Spider scrapy gens ...
分类：
编程语言 时间：
2020-02-25 21:50:55
阅读次数：
126
