思路如下： 首先找到图片的节点 找到爬取页面的urlhttps://www.qiushibaike.com/imgrank/ 发起请求拿到响应,略 使用正则表达式来获取图片的srcre.compile('.*?".*?', re.S) 最后持久化写入文件。 具体代码如下：import request... ...
分类：
其他好文 时间：
2019-04-05 12:34:26
阅读次数：
181
go依赖包下载加速方法及github加速 对于https://github.com/kubernetes/kubernetes整个仓库大小为近900M，下载起来那个伤心： + 方法一：使用 "码云" 这是码云上的的说明： 先从码云下载到本地，然后修改./git/config为github的仓库地址， ...
分类：
其他好文 时间：
2019-04-03 20:43:17
阅读次数：
271
系统版本：cs7.5 网络环境：阿里云服务器 nginx版本：nginx/1.6.2 一、下载编译工具及库文件 （download是下载到本地；localinstall * 系统会自动根据需要匹配依赖包） 二、安装PCRE 1、下载安装包 2、解压，进入安装目录 3、编译安装 4、查看版本，验证是否 ...
分类：
其他好文 时间：
2019-04-02 12:19:02
阅读次数：
168
CentOS6.8 脚本： #安装yum所需的包已经下载到本地 #!/bin/bashrpm -qa | grep yum | xargs rpm -e --nodepsrm -rf /etc/yum.confrm -rf /etc/yum.repos.d/*rpm -ivh python-inip ...
分类：
其他好文 时间：
2019-04-01 11:48:22
阅读次数：
198
一、Nexus的介绍?1.私服的介绍??私服是指私有服务器,是架设在局域网的一种特殊的远程仓库,目的是代理远程仓库及部署第三方构建.有了私服之后,当maven需要下载构件时,直接请求私服,私服上存在则下载到本地仓库;否则,私服请求外部的远程仓库,将构件下载到私服,在提供给本地仓库下载。?2.私服的介绍??Nexus是Maven仓库管理器，
分类：
其他好文 时间：
2019-03-31 09:24:14
阅读次数：
205
网络爬虫是捜索引擎抓取系统的重要组成部分。爬虫的主要目的是将互联网上的网页下载到本地形成一个或联网内容的镜像备份。 2. 理解爬虫开发过程 1).简要说明浏览器工作原理； 网络爬虫的基本工作流程如下： 1.首先选取一部分精心挑选的种子URL； 2.将这些URL放入待抓取URL队列； 3.从待抓取UR ...
分类：
其他好文 时间：
2019-03-27 10:45:52
阅读次数：
185
python进行接口自动化需要依赖于requests库，首先如果没有下载该库，使用pip进行下载到本地：1.进入D:\软件安装文件夹\PYTHON\Scripts目录下（ps：这个看个人安装python位置），使用cmd进入命令界面，输入pipinstallrequests,完成后即可使用参考示例：期间自己调测可以使用fiddler抓包进行调试，后面再研究使用unitest测试框架进行校验等
分类：
编程语言 时间：
2019-03-26 12:04:03
阅读次数：
157
创建官网 可以通过github pages的机制即可免费创建项目的官网，不用花一分钱。 创建项目 登录github，创建一个fast cache.github.io的项目，名字必须包含.io。然后下载到本地，即 到目录下新建一个index.html，随便写点东西，提交到github上。 最后访问fa ...
分类：
其他好文 时间：
2019-03-15 00:56:09
阅读次数：
176
今天给大家说一个将svg下载到本地图片的方法，这里我不得不吐槽一下，为啥博客园不可以直接上传本地文件给大家用来直接下载分享呢，好，吐槽到此为止！ 这里需要用到一个js文件，名字自己起，内容如下： (function() { const out$ = typeof exports != 'undefi ...
分类：
其他好文 时间：
2019-03-14 10:33:00
阅读次数：
182
1、官网下载安装包 http://nginx.org/en/download.html，选择适合Linux的版本，这里选择最新的版本，下载到本地后上传到服务器或者centos下直接wget命令下载。 切换到/usr/local目录，下载软件包 1 2 # cd /usr/local # wget h ...
分类：
其他好文 时间：
2019-03-14 00:41:10
阅读次数：
190
