非关系型数据库和关系型数据库的差别：非关系型数据库的优势：1. 性能NOSQL是基于键值对的，可以想象成表中的主键和值的对应关系，而且不需要经过SQL层的解析，所以性能非常高。2. 可扩展性同样也是因为基于键值对，数据之间没有耦合性，所以非常容易水平扩展。关系型数据库的优势：1. 复杂查询可以用SQL语句方便的在一个表以及多个表之间做非常复杂的数据查询。2. 事务支持使得对于安全性能很高的数据访问
分类：
编程语言 时间：
2017-11-25 21:42:06
阅读次数：
144
Hadoop2相比较于Hadoop1.x来说，HDFS的架构与MapReduce的都有较大的变化，且速度上和可用性上都有了很大的提高，Hadoop2中有两个重要的变更： （1）HDFS的NameNode可以以集群的方式布署，增强了NameNodes的水平扩展能力和高可用性，分别是:HDFS Fede ...
分类：
其他好文 时间：
2017-11-03 13:12:40
阅读次数：
222
1：什么是Storm？ Storm是一个开源的分布式实时计算系统，可以简单、可靠的处理大量的数据流。被称作“实时的hadoop”。Storm有很多使用场景：如实时分析，在线机器学习，持续计算， 分布式RPC，ETL等等。Storm支持水平扩展，具有高容错性，保证每个消息都会得到处理，而且处理速度很快 ...
分类：
其他好文 时间：
2017-10-31 17:41:40
阅读次数：
176
我们都知道在数据库数据量较多的时候,可数据进行水平扩展,如分库,分区,分表（也叫分区）等。对于分表的一个方案,就是使用分区视图实现。 分区视图允许将大型表中的数据拆分成较小的成员表。根据其中一列中的数据值范围，在各个成员表之间对数据进行分区。每个成员表的数据范围都在为分区依据列指定的 CHECK 约 ...
分类：
数据库 时间：
2017-10-25 13:08:40
阅读次数：
232
什么叫做水平扩展：增加计算机的数量，并没有提高计算机的性能 什么叫开源：开放源代码 什么叫做虚拟化：同时跑多个系统 一 JoinableQueue模块 JoinableQueue模块介绍：比Queue多了两个函数，一个是task_done，另一个是join，都是专用于全球进行编程的，大多数用于生产者 ...
分类：
系统相关 时间：
2017-10-12 17:52:09
阅读次数：
241
针对每天TB级的数据采集，一般而言，这些系统需要具有以下特征： 构建应用系统和分析系统的桥梁，并将它们之间的关联解耦； 支持近实时的在线分析系统和类似于Hadoop之类的离线分析系统； 具有高可扩展性。即：当数据量增加时，可以通过增加节点进行水平扩展。 从设计架构，负载均衡，可扩展性和容错性等方面对 ...
分类：
Web程序 时间：
2017-10-12 10:18:10
阅读次数：
305
在MongoDB（版本 3.2.9）中，分片集群（sharded cluster）是一种水平扩展数据库系统性能的方法，能够将数据集分布式存储在不同的分片（shard）上，每个分片只保存数据集的一部分，MongoDB保证各个分片之间不会有重复的数据，所有分片保存的数据之和就是完整的数据集。分片集群将数 ...
分类：
数据库 时间：
2017-09-19 15:23:18
阅读次数：
260
本文从以下几个方面对MongoDB进行介绍 一、分片键组件 二、分片键 三、哈希分片 四、范围分片 五、区间 六、分片部署实例 Sharding概述 是分片、或者分区的意思。分片是一个数据库架构，可以通过key 范围拆分数据并且把拆分后的数据分散的存储到两个或多个数据库实例。分片提供了水平扩展的功能 ...
分类：
数据库 时间：
2017-09-05 00:06:13
阅读次数：
216
################################################### 当我们系统架构出现瓶颈的时候一般扩展方法分为： 纵向扩展也可以叫垂直扩展，比如扩充服务器的cpu 1颗到2颗 内存8G到16G 磁盘容量扩容... 横向扩展也可以叫水平扩展，比如web服务器从1台 ...
分类：
其他好文 时间：
2017-09-03 23:55:55
阅读次数：
209
一、前言 在计算机领域，当单机性能达到瓶颈时，有两种方式可以解决性能问题，一是堆硬件，进一步提升配置，二是分布式，水平扩展。当然，两者都是一样的烧钱。今天聊聊我所理解的分布式系统的架构思路。 二、分布式系统的两种方式 平时接触到的分布式系统有很多种，比如分布式文件系统，分布式数据库，分布式WebSe ...
分类：
其他好文 时间：
2017-08-21 17:02:54
阅读次数：
188
