[TOC] 爬虫介绍 爬虫的本质就是模拟发送http请求（requests模块），之后解析返回的数据(re，bs4，lxml，json等模块)，最后将数据入库（redis，mysql，mongodb）。 app的爬虫，本质上是一模一样的。 python做爬虫的优势在于：包多，而且有爬虫的框架scra ...
分类：
其他好文 时间：
2020-04-07 23:57:24
阅读次数：
160
使用Docker创建MongoDb服务 1、先拉mongodb镜像 2、创建映射目录 创建mongo映射目录,用于存放后面的相关东西。 3、创建容器 我这里创建了两个容器，其余都一样。只有 auth的区别。 auth是用来使mongodb服务需要验证的指令，如果不需要验证，则不加。默认mongodb ...
分类：
数据库 时间：
2020-04-07 22:40:06
阅读次数：
86
master是主机，只有master装jenkins slave是小弟机无需装jenkins，主要执行master分配的任务 一、新建slave 1.新建slave的方法：点击magian jenkis magian nodes 以下设置，需要注意下 启动方式，新版的jenkins只有一个选项，如下 ...
分类：
其他好文 时间：
2020-04-07 14:13:59
阅读次数：
73
mongodb-python的交互：#安装pymongo：pip install pymongoimport pymongo 1.链接mongod的服务 2.库和表的名字：有数据会自动建库建表 3.插入数据 import pymongo try: #1.链接mongod的服务 mongo_py=py ...
分类：
数据库 时间：
2020-04-06 12:05:03
阅读次数：
101
1. 下载并解压 2. 准备配置文件 #新建文件 mongo.config，放在解压文件目录bin目录同级别目录下 dbpath=D:\mongodb4.2.5\data\db logpath=D:\mongodb4.2.5\logs\mongo.log port=27017 # logappend ...
分类：
数据库 时间：
2020-04-06 10:00:47
阅读次数：
73
1. 备份和恢复工具参数 * 几个重要参数： * mongodump * --polog：复制mongodump开始到结束过程中的所有oplog并输出到结果中。输出文件位于dump/oplog.bson * mongorestore * --oplogReplay：恢复完数据文件后再重放oplog。 ...
分类：
数据库 时间：
2020-04-06 00:19:53
阅读次数：
96
一、创建一个vue项目 用脚手架vue-cli搭建一个项目，数据请求用axios方式，写几个按钮用来调接口（vue这块不做多解释，不懂的可以先去官网学习vue-cli：https://cli.vuejs.org/zh/guide/cli-service.html axios：http://www.a ...
分类：
数据库 时间：
2020-04-05 20:07:43
阅读次数：
96
