概述
我们的memcache客户端(这里我看的spymemcache的源码),使用了一致性hash算法ketama进行数据存储节点的选择。与常规的hash算法思路不同,只是对我们要存储数据的key进行hash计算,分配到不同节点存储。一致性hash算法是对我们要存储数据的服务器进行hash计算,进而确认每个key的存储位置。
常规hash算法的应用以及其弊端
最常规的方式莫过于hash取模的方式。...
分类:
编程语言 时间:
2015-05-21 17:33:29
阅读次数:
158
Hadoop 主要由HDFS和MapReduce 引擎两部分组成。最底部是HDFS,它存储Hadoop 集群中所有存储节点上的文件。HDFS 的上一层是MapReduce 引擎,该引擎由JobTrackers 和TaskTrackers组成。
一、HDFS基本概念
1、数据块
HDFS默认的最基本的存储单位是64M的数据块,这个数据块可以理解和一般的文件里面的...
分类:
其他好文 时间:
2015-05-19 20:58:55
阅读次数:
198
系统环境:Centos6.3+mysql-cluster-gpl-7.1.15a-linux-x86_64-glibc23.tar.gz说明:1)MySQLCluster的启动:启动顺序:管理服务器-->存储节点-->SQL节点2)安全关闭ndbcluster:关闭顺序:SQL节点-->数据节点-->管理节点。#/usr/local/mysql/bin/mysqladmin-uroot..
分类:
数据库 时间:
2015-05-07 17:08:16
阅读次数:
212
1,关于FastDFS摘自:http://www.oschina.net/p/fastdfs
FastDFS是一个开源的分布式文件系统,她对文件进行管理,功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务,如相册网站、视频网站等等。FastDFS服务端有两个角色:跟踪器(tracker)和存储节点(storage)。...
分类:
其他好文 时间:
2015-04-28 14:16:47
阅读次数:
475
本文按照自己的理解从硬件磁盘到文件系统的逐层网上的思路开展,从操作系统的角度详解Linux文件系统层次、文件系统分类、文件系统的存储结构、不同存储介质的区别(RAM、ROM、Flash)、存储节点inode。...
分类:
系统相关 时间:
2015-04-24 09:02:10
阅读次数:
338
实验环境-10Gb网络环境-gluster1192.168.100.155三块磁盘-gluster2192.168.100.156三块磁盘-gluster2192.168.100.157三块磁盘-gluster2192.168.100.158三块磁盘安装配置gluster1存储节点安装如下,其它节点同样操作#格式化磁盘#
mkfs.ext4-Tlargefile/dev/sdb#超过2T的磁盘需要..
分类:
其他好文 时间:
2015-04-19 06:45:50
阅读次数:
235
JS:1.DOM树节点分类:doucument(文档)、element(HTML元素)、text(文本内容)、attribute(元素属性)2.访问DOM:nodeValue(存储节点的值)、nodeType(存储节点的类型)、childNodes(获取所有子节点的数组)、firstChild(获取...
分类:
Web程序 时间:
2015-04-12 15:59:09
阅读次数:
157
本文转载自:http://blog.csdn.net/kongqz/article/details/6695417一、概述 1、我们的memcache客户端使用了一致性hash算法ketama进行数据存储节点的选择。与常规的hash算法思路不同,只是对我们要存储数据的key进行hash计算,分配到不...
分类:
编程语言 时间:
2015-04-01 13:01:14
阅读次数:
192
算法的思想就不多说了。主要对代码解释一下。
graph = [[0,4,3,2],
[4,0,1,4],
[3,1,0,2],
[2,4,2,0]]
n = 4
flags = [True,True,True,True]
queue = []
#flags是存储节点访问情况的,true为待访问节点
#queue存储节点访问顺序
que...
分类:
编程语言 时间:
2015-03-27 22:28:04
阅读次数:
186
查看存储节点状态
[root@localhost ~]# cellcli
CellCLI: Release 11.2.3.2.0 - Production on Mon Mar 16 16:52:31 CST 2015
Copyright (c) 2007, 2012, Oracle. All rights reserved.
Cell Efficiency Ratio: 2,169
...
分类:
其他好文 时间:
2015-03-16 23:08:32
阅读次数:
389