实战2：使用selenium爬取淘宝数据，保存在mongodb 配置文件 MONGO_URL = 'localhost' MONGO_DB = 'taobao' MONGO_TABLE = 'yintiao' 爬虫文件 from selenium import webdriver from sele ...
分类：
数据库 时间：
2021-01-11 10:47:01
阅读次数：
0
vim mongodb.yaml apiVersion: apps/v1 kind: Deployment metadata: name: mongodb labels: app: mongodb spec: replicas: 1 selector: matchLabels: app: mongo ...
分类：
数据库 时间：
2021-01-07 11:58:16
阅读次数：
0
MongoDB语法与现有关系型数据库SQL语法比较 MongoDB语法 MySql语法 db.test.find({'name':'foobar'})<==> select * from test where name='foobar' db.test.find() <==> select *fro ...
分类：
数据库 时间：
2021-01-05 11:00:27
阅读次数：
0
1.UDAF定义 spark中的UDF(UserDefinedFunction)大家都不会陌生, UDF其实就是将一个普通的函数, 包装为可以按 行 操作DataFrame中指定Columns的函数. 例如, 对某一列的所有元素进行+1操作, 它对应mapreduce操作中的map操作. 这种操作有 ...
分类：
其他好文 时间：
2021-01-04 11:31:11
阅读次数：
0
今天执行：net start MongoDB 开启服务时，出现服务名无效问题。 百度搜了一些文章，终于找到了解决办法： 1、新建db文件夹和log文件夹 2、新建mongo.config文件 dbpath=D:\Program Files\MongoDB\Server\4.2\data\db log ...
分类：
数据库 时间：
2021-01-04 11:27:12
阅读次数：
0
DBA基础 一、数据库 1、概述 数据库：存储数据的仓库 数据库服务器：通过一定的存储方式、规则来进行管理数据的服务。 一切皆数据 2、分类 关系型：Oracle、Mysql、SQL-Server、DB2、MariaDB 非关系型：Redis、Memcached、MongoDB、CouchDB、Ne ...
分类：
数据库 时间：
2021-01-04 11:00:55
阅读次数：
0
1.修改mongodb配置文件之前，提前将配置文件备份，mongodb配置文件对格式有要求，修改容易无法重启服务。 2.找到mongodb.cfg文件编辑找到 # wiredTiger: 去掉# 3.修改 wiredTiger: engineConfig: cacheSizeGB: 0.5 4.注意 ...
分类：
数据库 时间：
2021-01-01 12:53:44
阅读次数：
0
一.前言 该博客主要针对工程实践项目的软件系统设计方案做一个简要的总结。包括总结软件结构特点（比如设计模式，架构风格），并通过不同视图来描述软件系统的概念原型。 有关本工程实践项目的介绍以及需求分析，可以见以下链接： https://www.cnblogs.com/chuanguo/p/140831 ...
分类：
其他好文 时间：
2021-01-01 12:39:51
阅读次数：
0
##每周总结 |学习时间|代码量|博客量|学习的知识点|下周任务| | | | | | | |20小时|1800左右|1篇|做了mapreduce实例|继续完成xxxx系统| ...
分类：
其他好文 时间：
2021-01-01 12:12:26
阅读次数：
0
下载 url 为 https://www.mongodb.com/try/download/community 选择 MongoDB Enterprise Server centos 版本 tgz wget https://fastdl.mongodb.org/linux/mongodb-linux ...
分类：
数据库 时间：
2021-01-01 12:00:13
阅读次数：
0
