HDFS
HDFS是一个具有高度容错性的分布式文件系统,适合部署在廉价的机器上,它具有以下几个特点:
1)适合存储非常大的文件
2)适合流式数据读取,即适合“只写一次,读多次”的数据处理模式
3)适合部署在廉价的机器上
但HDFS不适合以下场景(任何东西都要分两面看,只有适合自己业务的技术才是真正的好技术):
1)不适合存储大量的小文件,因为受Namenode内...
分类:
其他好文 时间:
2014-08-14 16:46:28
阅读次数:
260
为了便于管理大型软件系统中数目众多的类,解决类命名冲突的问题,java引入包(package)机制,提供类的多重类的命名空间。package作为java源文件中第一条语句,指明该文件中定义的类所在的包。(若缺省,则为无名包。)java编译器把包对应于文件系统的目录管理,package语句中,使用"....
分类:
编程语言 时间:
2014-08-14 16:24:08
阅读次数:
217
转载自:SD卡应用总结(FatFs) 对于SD卡的应用,想必大家都尝试多。不过,很多网友恐怕只停留在实验的基础上吧。对于SD卡在文件系统下或者不带文件系统下,对SD卡的操作都是很简单的。是的,只是简单的文件读写确实不难。但是,如果每秒钟不停的写数据,而且是不停的工作,恐怕SD卡的应用就没有这么简单....
分类:
其他好文 时间:
2014-08-14 16:16:28
阅读次数:
404
由于GFW的关系,国内用户在使用docker的时候,pull一个基本的镜像都拉下来,更不用说使用官方的index镜像了。差点放弃使用docker了,google了一圈,总算找到办法。
第一步:安装docker
参见官方指南或则各类中文指南
第二步:从文件系统创建一个image镜像
创建镜像有很多方法,官方的推荐是pull一个,无奈GFW,想下一个基本的ubuntu都下不下来
还有...
分类:
其他好文 时间:
2014-08-14 14:12:48
阅读次数:
334
1.连接文件区分为两种,一种类似windows下快捷方式,使用户能够快速连接到目标文件或目录。 另一种则通过文件系统中的inode连接来产生新文件名,而不是产生新文件。 两种方式分别称为符号/硬连接。2. 每个文件都会占用一个inode,其中记录了文件的权限和属性等信息,而文件内容由inode指.....
分类:
系统相关 时间:
2014-08-14 13:37:08
阅读次数:
235
有时根据情况需要更改mount挂载目录名来保持多个机器的统一,方便我们的分布式操作,下面是具体的操作细节。修改前:[root@localhost ~]# df -h文件系统 容量 已用 可用 已用%% 挂载点/dev/mapper/VolGroup-lv_root 50G...
分类:
系统相关 时间:
2014-08-14 10:35:18
阅读次数:
422
前文中介绍过,软RAID其实是通过md来实现的,它本质上是一个程序,用来模拟RAID。它依赖于CPU完成,需要占用大量的CPU时钟周期,所以性能不会太好;并且它完全依赖于当前操作系统,所以一旦操作系统损坏,则很有可能影响到该RAID的使用,因此在生产环境中,不建议使用软RAID。..
分类:
其他好文 时间:
2014-08-14 03:52:18
阅读次数:
357
最近有个FAT文件系统非正常umount导致sdcard挂载异常,进入errors处理,remount-ro了。[ 7993.545483] c0 FAT-fs (mmcblk0p1): Volume was not properly unmounted. Some data may be corr...
分类:
其他好文 时间:
2014-08-13 17:58:46
阅读次数:
226
51CTO学院,在软考备考季特别整理了"2014年软考网络管理员-考试练习题及答案",帮助各位学院顺利过关!更多软件水平考试辅导及试题,请关注51CTO学院-软考分类吧!查看汇总:2014年软考网络管理员考试练习题及答案【汇总篇】1.数据库管理技术是在的基础上发展起来的A.文件系统B..
分类:
其他好文 时间:
2014-08-13 15:14:07
阅读次数:
265
HDFS联邦
本指南提供了一个HDFS联邦特性的综述,以及如何配置和管理联邦的集群。
背景
HDFS有两个主要的层次:
1. Namespace
a) 包含很多的目录,文件和block
b) 他提供所有的文件系统操作像创建,删除,修改该和list文件和目录的命名空间
2. Block Storage Service有两个部分
a)...
分类:
其他好文 时间:
2014-08-13 14:59:36
阅读次数:
245