分布式爬虫默认八数据存储在redis中,可以将数据转存到Monogdb或Mysql中,从而降低内存消耗。 from redis import Redisfrom pymongo import MongoClientimport jsondef redis_to_mongodb(): redis_cl ...
分类:
其他好文 时间:
2021-05-04 16:35:44
阅读次数:
0
1. 安装 Use docker、package or source installations to install 第三方仓库 https://pkgs.org/download/haproxy 1.1 use docker docker run -it --rm haproxy:2.2 hap ...
分类:
其他好文 时间:
2021-05-04 16:22:39
阅读次数:
0
安装镜像:docker pull 镜像名称 查看所有运行容器:docker ps -a 运行容器:docker run --name 容器名称 进入指定容器:docker exec -it 容器名称 bash 重启容器:docker restart 容器名称 停止所有容器:docker stop $ ...
分类:
其他好文 时间:
2021-05-04 15:53:31
阅读次数:
0
const http=require('http') const fs=require('fs') const path=require('path') const server=http.createServer(function(req,res){ const {url}=req console ...
分类:
Web程序 时间:
2021-05-04 15:44:00
阅读次数:
0
Tkinter的原生界面并不好看。 虽然我们可以使用ttk进行美化。但那也仅限Windows和macos。Linux用了还是一样丑。 而且使用ttk也只是使用了系统风格,想要些别的UI风格,只导入ttk就不够了。 虽然ttk也内置几个主题但是也不怎么好看。 这是我们就要使用第三方主题了。 下面的网址 ...
分类:
其他好文 时间:
2021-05-04 15:24:53
阅读次数:
0
4.1、在命令行中使用Maven指令 1、 显示版本信息 mvn -version mvn -v 2、使用互动模式创建项目:mvn archetype:generate 3、使用非互动模式(指定参数创建项目) ? 普通项目骨架: mvn archetype:generate -DgroupId=co ...
分类:
其他好文 时间:
2021-05-03 13:19:56
阅读次数:
0
S3 File Size Single S3 Object can range in size from 0 bytes to 5TB Largest object that can be uploaded in a single PUT request is 5GB For Objects lar ...
分类:
其他好文 时间:
2021-05-03 12:56:01
阅读次数:
0
CUDA not support fork os.register_at_fork进行清理锁操作(需要拿到锁,因此一般为库的作者使用,提高库的多进程兼容性) Fork VS Spawn Spawn的缺点 Guess import sys import multiprocessing as mp de ...
分类:
编程语言 时间:
2021-05-03 12:10:27
阅读次数:
0
Jmeter软件安装之Mac 一、环境准备 安装JDK 下载Jmeter 二、下载Jmeter 下载地址: http://jmeter.apache.org/download_jmeter.cgi,下载之后解压即可。 复制对应的解压路径,后面配置环境变量时需要使用到 查看路径的方法如下: Jmete ...
分类:
系统相关 时间:
2021-05-03 11:57:11
阅读次数:
0
一、进入docker docker exec -it -uroot xxx bash 二、查看是否安装pytest pip3 list 三、找到之前安装py3.8的路径(每个人位置有区别) python3import syssys.path找到下方带bin的路径/var/jenkins_home/p ...
分类:
其他好文 时间:
2021-05-03 11:50:50
阅读次数:
0