码迷,mamicode.com
首页 >  
搜索关键字:python爬虫 mongodb ji    ( 12880个结果
MongoShake——基于MongoDB的跨数据中心的数据复制平台
https://yq.aliyun.com/articles/603329 在当前的数据库系统生态中,大部分系统都支持多个节点实例间的数据同步机制,如Mysql Master/Slave主从同步,Redis AOF主从同步等,MongoDB更是支持3节点及以上的副本集同步,上述机制很好的支撑了一个逻 ...
分类:数据库   时间:2020-03-06 10:37:45    阅读次数:121
mongodb基本语句
基本概念: * database 数据库 * collection 数据库表/集合 * document 数据记录行/文档 * field 数据字段/域 * index 索引 链接: // 链接到本机 admin数据库,也就是超级管理员,用户名 admin 密码 123456;就可查看所有数据库 m ...
分类:数据库   时间:2020-03-06 01:53:25    阅读次数:70
Python爬虫连载12-爬虫正则表示式、BeautifulSoup初步
一、正则常用的方法 1.match:从开始位置开始查找,一次匹配 2.sear?ch:从任何位置查找,一次匹配 3.findall?:全部匹配,返回列表 4.finditer?:全部匹配,返回迭代器 5.?split:分割字符串,返回列表 ?6.sub:替换 7.匹配中文 中文unicode编码[u ...
分类:编程语言   时间:2020-03-06 01:49:15    阅读次数:67
prometheus系列监控:jvm,mongodb,mysql,redis
jvm: maven添加dependence <!-- https://mvnrepository.com/artifact/io.micrometer/micrometer-registry-prometheus --> <dependency> <groupId>io.micrometer</g ...
分类:数据库   时间:2020-03-05 22:09:12    阅读次数:219
MongoDB安装
MongoDB安装 1.上传mongodb包 2.文件放于/usr/local/mongodb目录下 3.配置环境变量 4.mongdb启动配置 5.进入mongo ...
分类:数据库   时间:2020-03-05 16:43:11    阅读次数:76
python爬虫(十九)BeautifulSoup4库
1、BeautifulSoup4库也是一个HTML/XML解析器,主要也是提取数据。lxml只会局部遍历,BeautifulSoup是基于HTML DOM的,会载入整个文档,建立一个树状结构,在解析HTML时比较简单。 from bs4 import BeautifulSoup html=" 一段代 ...
分类:编程语言   时间:2020-03-04 23:37:55    阅读次数:129
记录一次 MongoDB aggregate的性能优化经历
在一台配置为2核4G的阿里云服务器上,硬盘是普通的云盘(即SATA盘),除mongoDB外,运行了若干个java应用,单节点mysql和redis,mongo的实际可用内存在1.5G左右。单表数据200万条的时候,一个聚合函数响应时间约为6秒,页面端每秒请求一次,由于响应不够及时,页面刷新不及时,服务端堆积了大量的mongoaggregate请求,系统可用内存不足,直接导致了溢出,mongo服务被
分类:数据库   时间:2020-03-04 23:09:51    阅读次数:340
Ubuntu 18.04配置MongoDB密码登录
系统:Ubuntu18.04MongoDB:4.23安装MongoDBserver和client(测试用)#添加MongoDBGPG密钥apt-keyadv--keyserverhkp://keyserver.ubuntu.com:80--recv4B7C549A058F8B6B#创建MongoDB存储库echo"deb[arch=amd64]https://repo.mongodb.org/ap
分类:数据库   时间:2020-03-04 22:51:24    阅读次数:188
MongoDB - 聚合
MongoDB聚合方法:aggregate() 语法:db.collection_name.aggregate(AGGREGATE_OPERATION) 管道:MongoDB的聚合管道将文档在一个管道处理完毕的结果传递给下一个管道处理,管道操作是可以重复的 常用管道: $project: 控制返回文 ...
分类:数据库   时间:2020-03-04 12:25:05    阅读次数:72
MongoDB 常用操作及学习资料收集
文档链接 "MongoDB Tutorial" MongoDB 常用操作 MongoDB 常用操作列表如下: | 操作 | 示例 | 描述 | | | | | | 本地登录 | mongo | 直接执行 mongo 命令 | | 远程登录 | mongo ip :27017 | 27017 为默认端 ...
分类:数据库   时间:2020-03-04 11:18:07    阅读次数:76
12880条   上一页 1 ... 85 86 87 88 89 ... 1288 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!