Redis集群方案: RedisCluster, ShardedJedis, Codis ...
分类：
其他好文 时间：
2018-03-18 16:15:31
阅读次数：
338
六个最常见的系统质量属性为： 1.可用性/可靠性（Availability）： 可靠性是指在规定使用条件下，维持用户一定性能要求的能力；包括：成熟度，容错性，可恢复性； 2.可修改性（Modifiability）： 可修改性是指容易修改的能力，修改包括修正，改进和用户需求的变化；包括：易分析，易修改 ...
分类：
其他好文 时间：
2018-03-15 19:16:48
阅读次数：
160
一、官网教程案例学习 Kafka — 分布式消息队列 消息系统 消息中间件：缓冲于生产与消费中间 缓冲满了，可以进行Kafka的扩容 特性： 水平扩展性、容错性、实时、快 Kafka架构： 理解producer、consumer、broker（缓冲区）、topic（标签） 一个配置文件（server ...
分类：
其他好文 时间：
2018-03-11 17:38:13
阅读次数：
182
一、Flume基础部分： Flume -- 日志收集框架 产生背景： 日志分散到各个机器上，又想用大数据平台进行统计分析 从其他server把日志移动收集到集群上，并能够监控，需要有时效性、容错性、负载均衡 Flume 一般通过配置configuration file，来实现各种数据的收集 概述： ...
分类：
Web程序 时间：
2018-03-11 17:24:50
阅读次数：
204
概述 目前几乎很多大型网站及应用都是分布式部署的，分布式场景中的数据一致性问题一直是一个比较重要的话题。分布式的CAP理论告诉我们“任何一个分布式系统都无法同时满足一致性（Consistency）、可用性（Availability）和分区容错性（Partition tolerance），最多只能同时 ...
分类：
其他好文 时间：
2018-03-11 02:40:54
阅读次数：
203
目录 1、HDFS 前言 ................................................................................................................................... 1 2、H ...
分类：
其他好文 时间：
2018-03-09 22:50:40
阅读次数：
351
1、分布式原理分布式文件系统就是把一些分散在多台计算机上的共享文件夹，集合到一个共享文件夹内，用户要访问这些文件夹的时候，只要打开一个文件夹，就可以的看到所有链接到此文件夹内的共享文件夹。2、MFS原理MFS是一个具有容错性的网络分布式文件系统，它把数据分散存放在多个物理服务器上，而呈现给用户的则是一个统一的资源。1）MFS的组成元数据服务器（Master）：在整个体系中负责管理文件系统，维护元数
分类：
其他好文 时间：
2018-03-09 22:49:41
阅读次数：
205
Spark最基本、最根本的数据抽象 RDD基于内存，提高了迭代式、交互式操作的性能 RDD是只读的，只能通过其他RDD批量操作来创建，提高容错性 另外RDD还具有位置感知性调度和可伸缩性 RDD只支持粗粒度转换，记录Lineage，用于恢复丢失的分区，从物理存储的数据计算出相应的RDD分区 RDD的 ...
分类：
其他好文 时间：
2018-03-06 23:16:00
阅读次数：
180
[mfs工作原理]分布式原理分布式文件系统就是把一些分散在多台计算机上的共享文件夹，集合到一个共享文件夹内，用户要访问这些文件夹的时候，只要打开一个文件夹，就可以的看到所有链接到此文件夹内的共享文件夹。.MFS原理MFS是一个具有容错性的网络分布式文件系统，它把数据分散存放在多个物理服务器上，而呈现给用户的则是一个统一的资源。1）MFS的组成元数据服务器（Master）：在整个体系中负责管理文件系
分类：
其他好文 时间：
2018-03-04 21:17:24
阅读次数：
187
在工作过程中，生产app产品偶尔会发生一些在测试过程中无法发现的bug，很多时候是因为在生产环境中服务更不稳定，后端接口会有很多异常返回，例如最常见的result code为非200，或者在数据传输过程中，部分字段丢失了，此时如果前端没有对这种状态做好保护措施，很容易在前端导致Crash。 因此测试 ...
分类：
其他好文 时间：
2018-03-02 23:08:54
阅读次数：
959
