基于AI、大数据的互联网应用推动了互联网数据中心产品、技术的快速升级。首先,接入带宽从传统的10Gbps升级到25Gbps/100Gbps,需要基础网络提供高转发能力保障业务的高可用。其次,基于RDMA(RemoteDirectMemoryAccess,远程直接内存访问)无损以太网技术的普遍应用,实现了计算节点到存储节点的微秒级时延,大大优化端到端的业务转发性能,而这也意味着对网络运维提出了更高的
分类:
Web程序 时间:
2019-05-09 00:41:18
阅读次数:
503
1.简介 FastDFS文件服务器在设计时,为了支持大容量,存储节点(服务器)采用了分卷(或分组)的组织方式。存储系统由一个或多个卷组成,卷与卷之间的文件是相互独立的,所有卷的文件容量累加就是整个存储系统中的文件容量。一个卷可以由一台或多台存储服务器组成,一个卷下的存储服务器中的文件都是相同的,卷中 ...
分类:
其他好文 时间:
2019-05-03 11:17:18
阅读次数:
679
节点配置信息说明: 控制节点:controller: IP:192.168.164.128 hostname&hosts:likeadmin 计算加点:Nova: IP:192.168.164.129 hostname&hosts:likenode 块存储节点:cinder: IP:192.168. ...
分类:
其他好文 时间:
2019-04-29 11:02:19
阅读次数:
118
LRU是Least Recently Used的缩写,意思是最近最少使用,它是一种Cache替换算法。现在要设计一种数据结构有如下几种性质: 1. 每个节点为一对key,value的形式,可通过get <key>查找,通过put <key, value> 插入 2. 最大存储节点数为n 3. put ...
分类:
系统相关 时间:
2019-04-26 11:15:00
阅读次数:
151
从操作系统的角度详解Linux文件系统层次、文件系统分类、文件系统的存储结构、不同存储介质的区别(RAM、ROM、Flash)、存储节点inode。本文参考: http://blog.chinaunix.net/uid-8698570-id-1763151.html http://www.iteye ...
分类:
系统相关 时间:
2019-04-24 23:34:46
阅读次数:
204
最近准备用ceph搭建一个存储集群,作为平台的共享存储,使用三台虚拟机 先规划在每台虚拟机上需要配置的服务。 ceph-admin,作为主管理节点 ceph-manager,作为主控制节点 ceph-osd,作为存储节点,ceph-osd需要直接使用盘,在虚拟机上可以使用挂载额外的盘实现,如果是单机 ...
分类:
其他好文 时间:
2019-04-02 19:51:13
阅读次数:
393
介绍 open stack 是云计算中的 Iaas 架构,开源的且经过apache 许可的。 架构 openstack 是云平台的一种架构,是由许多组件组合而成的。 按照节点来分 计算节点(computer) 网络节点(networking) 存储节点(storage) 每个节点都是openstac ...
分类:
其他好文 时间:
2019-02-22 18:32:04
阅读次数:
184
基础环境准备,所需服务器及说明 172.16.2.51 base.test.com 基础服务节点 172.16.2.52 ctrl.test.com 控制节点 172.16.2.53 com1.test.com 计算节点 172.16.2.54 cin1.test.com 存储节点 一、 NTP S ...
分类:
其他好文 时间:
2019-02-05 18:10:21
阅读次数:
180
本文旨在讲述如何使用 Java 语言实现基于 Raft 算法的,分布式的,KV 结构的存储项目。该项目的背景是为了深入理解 Raft 算法,从而深刻理解分布式环境下数据强一致性该如何实现;该项目的目标是:在复杂的分布式环境中,多个存储节点能够保证数据强一致性。 ...
分类:
编程语言 时间:
2019-01-12 14:18:52
阅读次数:
187
hadoop集群某个节点dfs存储比其他节点存储高时,一般会使用hadoop提供的balance(start-balancer.sh -threshold 10 )工具来移动高存储节点上的块到低存储节点上. 其中 -threshold 默认设置:10,参数取值范围:0-100,参数含义:判断集群是否 ...
分类:
其他好文 时间:
2018-12-08 21:10:12
阅读次数:
226