- 环境的安装 a. pip3 install wheel b. 下载twisted http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted c. 进入下载目录,执行 pip3 install Twisted?17.1.0?cp35?cp35m?win_ ...
分类:
其他好文 时间:
2021-04-15 12:48:59
阅读次数:
0
背景 公司其中一个项目采用分支上线模式,每次生产上线都需要修改 Jenkins 任务中的 Git 分支版本,改为参数传递 Git 分支。 实现 我们采用参数传递 Git 分支,另外也可使用Git Parameter插件实现,会列出所有的 Git 分支。 在 Jenkins 任务中添加 String ...
分类:
其他好文 时间:
2021-04-07 11:42:06
阅读次数:
0
Scrapy快速入门: 安装和文档: 1、安装:通过pip install Scrapy即可安装 2、Scrapy官方文档: http://doc.scrapy.org/en/latest 3、Scrapy中文文档: http://scrapy chs.readthedocs.io/zh_CN/la ...
分类:
其他好文 时间:
2021-04-06 15:10:38
阅读次数:
0
Scrapy框架架构: Scrapy框架介绍: 写一个爬虫,需要做很多的事情。比如:发送请求、数据、数据存储、反反爬虫机制(更换ip代理、设置请求头等)、异步请求。这些工作如果每次都要自己从零开始写的话,比较浪费时间’因此Scrapy 把一些基础的东西封装好了,在它上面写爬虫可以变的更加的高效(爬取 ...
分类:
其他好文 时间:
2021-04-06 15:10:26
阅读次数:
0
一,引言 起因是前两天项目上做测试,需要我把写好的基于.NET 5 的 Web 测试程序作成 Docker 镜像。当我在本地验证完功能后,准备利用 Docker 构建应用程序镜像的时候,发现系统不支持安装 Docker Desktop。这下看来只能利用Azure DevOps 自动创建 Docker ...
分类:
移动开发 时间:
2021-04-06 15:08:41
阅读次数:
0
目标 最近在学unity中跟画面相关的功能。在看完B站上某URP教学视频后,希望能用代码控制post-processing中的相关参数。 前言 unity中,我们可以通过设置2dlight和post-processing来调整、渲染游戏画面。在unity更新至某版本后,unity官方用URP(Uni ...
分类:
编程语言 时间:
2021-04-06 14:53:04
阅读次数:
0
Scrapy 如何控制导出顺序 1. 遇到的问题 在用Scrapy到处item的时候,发现顺序错乱(应该是按照abc的顺序排列的),并不是items.py文件中定义的顺序,那么如何控制呢? 2. fields_to_export 我在查看官网文档的时候找到了这个属性,它的解释是这样的: fields ...
分类:
其他好文 时间:
2021-04-05 12:28:39
阅读次数:
0
1、前言 有点小激动,今天好像发现了新大陆。不知道讲的对不对,姑且记录一波,有不对的地方大家请指正。 在FPGA中,流水线技术就是向组合逻辑中插入寄存器,提升系统的时钟频率。 2、实际电路中的流水线 参考:FPGA流水线的详细解析 参考:流水线技术 参考:系统架构之流水线技术 在一个简单的例子中,如 ...
分类:
其他好文 时间:
2021-04-02 12:59:33
阅读次数:
0
在py文件中开启scrapy爬虫,且可传入start_urls参数。 ...
分类:
其他好文 时间:
2021-03-31 12:10:02
阅读次数:
0
本文分享的小Tips是在我前面的文章DevOps建设之基于钉钉OA审批流的自动化上线中提到的,当通过API自动触发Jenkins Pipeline流水线执行时,如果原来的流水线中定义了在构建正式开始后还需要接收用户input的步骤,想要自动绕过或自动执行input的方法 1、pipeline inp ...