将内存作为首要存储介质不是什么新鲜事儿,在对主存的使用上,内存数据网格(In Memory Data Grid,IMDG)与IMDB类似,但二者在架构上完全不同。IMDG特性可以总结为以下几点: 数据是分布式存储在多台服务器上的。 每台服务器都是active模式。 数据模型通常是面向对象和非关系型的 ...
分类:
其他好文 时间:
2018-11-17 19:27:16
阅读次数:
243
memcache介绍 名字 类型 整理 key vachar utf8_general_ci value text utf8_general_ci 使用场景 非持久化存储:对数据存储要求不高 分布式存储:不适用单机 key-value存储:格式简单,不支持list,array等数据格式 安装 方式 ...
分类:
系统相关 时间:
2018-11-12 15:51:47
阅读次数:
187
10月27日下午,2018中国计算机大会上举办了主题“数据中心计算”的技术论坛,一起探讨解决数据中心所面临的挑战。论坛上,阿里云分布式存储团队高级技术专家田磊磊进行了《阿里云文件存储的高性能架构演进之路》的报告。
分类:
其他好文 时间:
2018-11-07 16:34:42
阅读次数:
183
大数据分布式存储的部署模式:分离式or超融合 数据中心内部系统的核心要求是“稳定可靠”,一是指系统在运行过程中有能力提供连续可靠的服务,长时间无故障运行;二是指当故障发生之后,有能力快速定位,及时排查,故障范围不蔓延。 分离式部署的方式,使得系统与云平台系统相独立,避免了计算和存储争抢CPU/内存/ ...
分类:
其他好文 时间:
2018-11-07 11:24:59
阅读次数:
201
一、hadoop简介 相信你或多或少都听过hadoop这个名字,hadoop是一个开源的、分布式软件平台。它主要解决了分布式存储(hdfs)和分布式计算(mapReduce)两个大数据的痛点问题,在hadoop平台上你可以轻易地使用和扩展数千台的计算机而不用关心底层的实现问题。而现在的hadoop更 ...
分类:
其他好文 时间:
2018-11-06 01:02:39
阅读次数:
270
一、分布式存储系统简介 随着信息技术不断的发展,给我们带来便利的同时,不断增加的数据量级、信息之间的连接关联越来越复杂、数据访问的并发量日益增加对I/O的要求越来越高、数据类型越来越复杂等难题也成为信息技术继续高速发展亟需解决的难题。分布式存储系统的出现在很大程度上解决了以上大部分难题。 分布式存储 ...
分类:
其他好文 时间:
2018-11-04 22:53:28
阅读次数:
276
EhCache是一个比较成熟的Java缓存框架,最早从hibernate发展而来, 是进程中的缓存系统,它提供了用内存,磁盘文件存储,以及分布式存储方式等多种灵活的cache管理方案,快速简单。 Springboot对ehcache的使用非常支持,所以在Springboot中只需做些配置就可使用,且 ...
分类:
编程语言 时间:
2018-11-02 19:06:18
阅读次数:
194
Ceph简介 Ceph是一个分布式存储系统, 具有高扩展性, 高可靠性, 高性能的存储集群, 它目前提供对象存储, 块设备存储, 文件系统存储三种存储应用 高扩展性:使用普通x86服务器,支持TB到PB级的扩展。 高可靠性:多数据副本,没有单点故障,自动管理,自动修复。 高性能:数据分布均衡,并行化 ...
分类:
其他好文 时间:
2018-11-02 11:09:39
阅读次数:
173
[TOC] 基础 建立在Hadoop上的数据仓库(Hive的表就是HDFS的目录、数据就是HDFS的文件),定义了类似SQL的查询语言,通过它来读写和管理分布式存储的数据。它的底层执行引擎可以是MapReduce、Spark等(将SQL语句转化成M/R或者Spark语言)。 优点:简单SQL,常用于 ...
分类:
其他好文 时间:
2018-10-29 18:28:23
阅读次数:
173
火热的区块链技术了解一下一、分布式存储分布式存储是一种数据存储技术,通过网络使用企业中的每台机器上的磁盘空间,并将这些分散的存储资源构成一个虚拟的存储设备,数据分散的存储在企业的各个角落。分布式账本是一种在网络成员之间共享、复制和同步的数据库。分布式账本记录网络参与者之间的交易,比如资产或数据的交换。网络中的参与者根据共识原则来制约和协商对账本中的记录的更新。没有中间的第三方仲裁机构(比如金融机构
分类:
其他好文 时间:
2018-10-26 16:26:58
阅读次数:
164