三、存储器层次结构 本章要求 掌握存储器的分类和各类存储器的基本工作原理，包括SRAM、DRAM、ROM，掌握主存储器与CPU的连接和数据交换、双口RAM和多模块存储器。 两个重要考点： *Cache *虚拟存储器 存储器的地址组织: 地址和内容的问题 一个32位机一次能访问32个二进制数，4字节， ...
分类：
其他好文 时间：
2018-07-07 22:42:15
阅读次数：
280
Hadoop小文件存储方案 HDFS总体架构 在介绍文件存储方案之前，我觉得有必要先介绍下关于HDFS存储架构方面的一些知识，在对架构有初步了解后，才会明白为什么要单独针对小文件展开介绍，小文件存储和其它文件存储区别在什么地方。 这里我只是就Hadoop生态中的存储层展开介绍，对于其它部分本文暂未描 ...
分类：
其他好文 时间：
2018-06-19 13:44:54
阅读次数：
241
一、AIX的存储层在AIX中，可以直接IO的最底层设备是PV，也就是物理卷，通常在单硬盘环境可以理解为物理磁盘，在挂载的硬件RAID设备上，PV就是RAID卷组(有时候称为逻辑卷，虚拟卷)。PV通常不用来直接存储数据，仅做为VG的成员使用。因PV的大小是随机的，存储时为了效率上的考虑，VG需要有特定的分配颗粒大小，这就又引入了2个存储概念：PP和LP。PP(PhysicalPartition)在创
分类：
其他好文 时间：
2018-06-14 18:43:10
阅读次数：
201
在CDH5.14.2中启用kudu的配置标签（空格分隔）：大数据平台构建一：系统平台介绍二：安装kudu的集成一：系统平台介绍1.1.关于kudu的介绍Kudu是Cloudera开源的新型列式存储系统，是ApacheHadoop生态圈的新成员之一(incubating)，专门为了对快速变化的数据进行快速的分析，填补了以往Hadoop存储层的空缺。 Hadoop生态系统有很多组件，每一个组件有不同
分类：
其他好文 时间：
2018-06-11 14:47:12
阅读次数：
624
一、基本介绍1、它对JDBC进行了非常轻量级的对象封装，它将POJO与数据库表建立映射关系，是一个全自动的orm（对象关系映射）框架，hibernate可以自动生成SQL语句，自动执行； Hibernate可以应用在任何使用JDBC的场合。 2、持久化层：处理关系型数据库（数据存储层）和模型对象（o ...
分类：
Web程序 时间：
2018-06-09 23:16:41
阅读次数：
230
1、字符串使用场景 a) 缓存功能 典型使用场景：Redis作为缓存层，MySQL作为存储层，绝大部分请求的数据都是从Redis中获取，由于Redis具有支撑高并发的特性，所以缓存通常能起到加速读写和降低后端压力的作用。 开发提示：与MySQL等关系型数据库不同的是，Redis没有命令空间，而且也没 ...
分类：
其他好文 时间：
2018-06-04 14:09:25
阅读次数：
109
存储层(Hadoop分布式文件系统) HDFS一、分布式文件系统 多台计算机联网协同工作(有时也称为一个集群)就像单台系统一样解决某种问题，这样的系统我们称之为分布式系统。 分布式文件系统是分布式系统的一个子集，它们解决的问题就是数据存储。换句话说，它们是横跨在多台计算机上的存储系统。存储在分布式文 ...
分类：
其他好文 时间：
2018-05-13 18:01:59
阅读次数：
186
本文由 网易云 发布。 Kudu是Cloudera开源的新型列式存储系统，是Apache Hadoop生态圈的新成员之一（incuba ng），专门为了对快速变化的数据进行快速的分析，填补了以往Hadoop存储层的空缺。本文主要对Kudu的动机、背景，以及架构进行简单介绍。 背景——功能上的空白 H ...
分类：
其他好文 时间：
2018-05-09 16:50:55
阅读次数：
166
高并发高可用的 架构实践 参考博客：https://blog.csdn.net/taotoxht/article/details/46931045 二、 静态架构蓝图 整个架构是分层的分布式的架构，纵向包括CDN，负载均衡/反向代理，web应用，业务层，基础服务层，数据存储层。水平方向包括对整个平台 ...
分类：
其他好文 时间：
2018-05-09 10:12:53
阅读次数：
144
在存储层面节省空间的处理上，Hbase提供了两种方案，一个是基于key的编码，一个是基于数据块（data block）的压缩。前者用于将key重复部分进行简单处理达到节约空间的目的，后者则是对数据块进行压缩，实现节省硬盘。不过压缩和解压缩是影响处理性能的，都是那时间换空间；所以要权衡清楚。 关于ke ...
分类：
其他好文 时间：
2018-04-15 18:01:14
阅读次数：
333
