背景 在如今的互联网环境下，海量数据已随处可见并且还在不断增长，对于如何存储处理海量数据，比较常见的方法有两种： 垂直扩展：通过增加单台服务器的配置，例如使用更强悍的 CPU、更大的内存、更大容量的磁盘，此种方法虽然成本很高，但是实现比较简单，维护起来也比较方便。 水平扩展：通过使用更多配置一般的服 ...
分类：
数据库 时间：
2019-10-16 09:40:22
阅读次数：
122
1. 需求 如果搭建redis分片,如果其中一台服务器宕机.则导致整个分片不能正常使用. 需求:能否实现服务器尽可能”不宕机”.(高可用) 2. Redis哨兵工作原理 前提：如果需要实现redis高可用,必须先配置主从结构： 1. 用户通过哨兵之后连接当前集群中的主机； 2. 哨兵通过心跳检测机制 ...
分类：
其他好文 时间：
2019-10-14 01:19:58
阅读次数：
77
1. 分片作用 说明：一般的业务系统中会将一些重要数据保存到内存中，如果内存占用很大时只使用一台redis则效率低，所以搭建redis分片实现内存的扩容。 2. 准备3台redis mkdir shards 2.复制3份配置文件 cp redis.conf shards/6379.conf cp r ...
分类：
其他好文 时间：
2019-10-13 23:31:42
阅读次数：
129
1 MongoDB 分片（高可用） 1.1 准备工作 三台虚拟机 安装MongoDB 虚拟机相互之间可以相互通信 虚拟机与主机之间可以相互通信 1.2 安装MongoDB 在Ubuntu16.04 中安装 MongoDB 。参考步骤 "MongoDB官方网站" 安装时会报错 提示需要安装apt tr ...
分类：
数据库 时间：
2019-10-12 18:33:38
阅读次数：
115
Navicat premium是一款数据库管理工具,是一个可多重连线资料库的管理工具， 它可以让你以单一程式同时连线到 MySQL、SQLite、Oracle 及 PostgreSQL，mongodb，让管理不同类型的资料库更加的方便。 软件截图： 1、连接mongo点击这个位置： 2、连接参数介绍 ...
分类：
数据库 时间：
2019-10-12 10:55:09
阅读次数：
2635
文档结构： 以下前言来自网络 前言 什么时候需要考虑做数据切分？ 这里说的运维，指： 举个例子，假如项目一开始设计的用户表如下： id bigint #用户的ID name varchar #用户的名字 last_login_time datetime #最近登录时间 personal_info t ...
分类：
数据库 时间：
2019-10-11 01:13:20
阅读次数：
477
粘包和拆包是TCP网络编程中不可避免的，无论是服务端还是客户端，当我们读取或者发送消息的时候，都需要考虑TCP底层的粘包/拆包机制。 TCP粘包和拆包 TCP是个“流”协议，所谓流，就是没有界限的一串数据。TCP底层并不了解上层业务数据的具体含义，它会根据TCP缓冲区的实际情况进行包的划分，所以在业 ...
分类：
Web程序 时间：
2019-10-10 22:03:49
阅读次数：
124
BIGFILE Github地址： https://github.com/bigfile/bigfile 欢迎大家前来issue & star BIGFILE 中文文档地址：https://learnku.com/docs/bigfile/1.0 BIGFILE基本介绍 Bigfile 是使用 Go ...
分类：
Web程序 时间：
2019-10-08 12:21:47
阅读次数：
250
使用者 是一种处理 Kinesis 数据流中的所有数据的应用程序。当使用者使用增强型扇出功能 时，它会获取其自己的 2 MiB/秒的读取吞吐量配额，从而允许多个使用者并行读取相同流中的数据，而不必与其他使用者争用读取吞吐量。默认情况下，流中的每个分片均提供 2 MiB/秒的读取吞吐量。此吞吐量跨正在 ...
分类：
其他好文 时间：
2019-10-07 21:14:20
阅读次数：
116
1. 数据类型类型 1.1. 原子类型 type()函数 >>> type(3.4) <class 'float'> >>> type(True) <class 'bool'> >>> type(3<4) <class 'bool'> 1.1.1. 布尔型 True False >>> 4>4 Fa ...
分类：
其他好文 时间：
2019-10-07 11:33:54
阅读次数：
125
