MongoDB副本集延迟太高，数据读取时间过长怎么办？不要慌，菊长教您一个小妙招：在集合创建的时候，就建立好索引，然后按照索引去寻找您所需要的数据。如果觉得比较麻烦，华为云文档数据库服务DDS了解一下。DDS服务100%兼容MongoDB，云上托管实例，无需客户操心。 ...
分类：
数据库 时间：
2020-03-19 13:54:10
阅读次数：
102
主要使用request库和beautifulSoup库爬取今日热榜的数据。 具体代码实现： 1 import requests 2 from bs4 import BeautifulSoup 3 import time 4 import pandas 5 import re 6 7 def get_ ...
分类：
编程语言 时间：
2020-03-19 13:50:59
阅读次数：
94
我们在写爬虫构建请求的时候，不可避免地要添加请求头( headers )，一般来说，我们只要添加 user-agent 就能满足绝大部分需求了 但这并不是绝对的，有些请求单单添加一个 user-agent 是不能获取到数据的，在不知道是缺少哪个请求头参数的情况下，我一般会先把所有参数全部添加上，然后 ...
分类：
编程语言 时间：
2020-03-19 12:04:04
阅读次数：
100
#### 如何做好分片集群 * 合理的架构 * 是否需要分片？ * 要分多少片？ * 数据分布规则？ * 正确的姿势 * 选择需要分片的表 * 选择正确的片键 * 使用合适的均衡策略 * 足够的资源 * CPU * RAM * 存储1. 合理的架构-分片大小 * 分片的基本标准： * 分片的基本标准 ...
分类：
数据库 时间：
2020-03-18 21:53:51
阅读次数：
80
### 实验：分片集群搭建及扩容#### 实验目标及流程 * 目标：学习如何搭建一个两分片的分片集群 * 环境：3台Linux虚拟机器，4Core 8GB * 步骤： * 配置域名解析 * 准备分片目录 * 创建第一个分片复制集并初始化 * 初始化分片集群，加入第一个分片 * 创建分片表 * 加入第 ...
分类：
数据库 时间：
2020-03-18 21:42:36
阅读次数：
76
MongoDB 索引 一.概述 索引通常能够极大的提高查询的效率，如果没有索引，MongoDB在读取数据时必须扫描集合中的每个文件并选取那些符合查询条件的记录。 这种扫描全集合的查询效率是非常低的，特别在处理大量的数据时，查询可以要花费几十秒甚至几分钟，这对网站的性能是非常致命的。 索引是特殊的数据 ...
分类：
数据库 时间：
2020-03-18 18:56:29
阅读次数：
72
1.下载 https://www.mongodb.com/download-center/community?jmp=nav 2.安装步骤（这里以4.0.6版本为例） 3.配置参数 3.1 创建D:\mongodb\data\log目录，用来存放日志文件； 3.2 在D:\mongodb\data\ ...
分类：
数据库 时间：
2020-03-18 18:43:54
阅读次数：
72
（安装教程地址：https://www.runoob.com/mongodb/mongodb-window-install.html） 前情提要：按照菜鸟教程安装配置MongoDB服务，在进行到 “启动MongoDB服务”时出现问题，系统提示“net start MongoDB 系统没有响应控制” ...
分类：
数据库 时间：
2020-03-18 15:57:38
阅读次数：
61
https://www.cnblogs.com/seven-sky/p/4729962.html https://blog.csdn.net/bxjie/article/details/39581565 http://nto.github.io/AirPlay.html https://www.ji ...
分类：
其他好文 时间：
2020-03-18 11:36:39
阅读次数：
72
首先配置yum源 vi /etc/yum.repos.d/mongodb-org.repo [mongodb-org] name=MongoDB Repository baseurl=http://mirrors.aliyun.com/mongodb/yum/redhat/7/mongodb-org ...
分类：
数据库 时间：
2020-03-17 22:32:43
阅读次数：
94
