HDFS:1、分布式文件系统:管理网络中跨多台计算机存储的文件系统2、hadoop定义了一个抽象文件系统概念,具体就是一个java抽象类:org.apache.hadoop.fs.FileSystm,只要某个文件系统实现了该接口,就可以作为hadoop支持的文件系统3、数据块:hdfs中默认存储是6...
分类:
其他好文 时间:
2015-10-08 14:40:16
阅读次数:
188
1、实现dd的备份: 使用gzip压缩:ddif=/dev/hdb | gzip > /local/path/image.gz 说明:/dev/hdb 是硬盘整盘。对不同的硬盘,可能是 /dev/sda 或其他。在备份前,用sudo fdisk -l命令看一下,硬盘是哪个文件。。image.gz 是...
分类:
其他好文 时间:
2015-09-06 17:48:10
阅读次数:
160
FTP(FileTransferProtocol,文件传输协议),应用层协议,可跨平台。如其名,只能实现文件传输功能,不能实现一些其他的功能,例如文件系统挂载等功能。NFS(NetworkFileSystem,网路文件系统),工作在内核模式下的,故难以实现跨平台。由于基于文件系统实现,在linux下可实..
分类:
系统相关 时间:
2015-05-21 06:44:14
阅读次数:
259
有时间睡懒觉了,却还是五点多醒了,不过一直躺倒九点多才算起来,昨晚一直在弄飞凌的嵌入式开发板,有些问题没解决,自己电脑系统的问题,虽然Win10发布了,,但我还是好喜欢XP呀,好想回家用用家里的XP来玩玩这块板子,不知不觉也第五天了,感觉代码都有些模糊,连自己都不是很清楚了,担心现在分享起来比较.....
分类:
系统相关 时间:
2015-01-24 18:40:10
阅读次数:
281
HDFS是hadoop项目的核心子项目,是Hadoop主要的一个分布式文件系统。实际上,hadoop中有一个文件系统抽象,它提供了文件系统实现的各类接口,HDFS只是这个抽象文件系统的一个实例。文件系统 URI JAVA实现定义Localfilefs.LocalFileSystem本地文...
分类:
其他好文 时间:
2015-01-13 01:17:53
阅读次数:
180
分布式文件系统即是网络中多台计算机组合在一起提供一个统一存储及管理的系统。 Hadoop提供了一个文件系统接口和多个分布式文件系统实现,其中比较重要的就是HDFS(Hadoop Distributed Filesystem)了。Hadoop是一个综合性的文件系统抽象,因此它也可以集成其他文件系统的实...
分类:
其他好文 时间:
2014-12-22 10:41:42
阅读次数:
278
[Linux]
[1] 目录
net 网络协议栈及socket
fs 文件系统实现(vfs、具体文件系统)及编程接口(系统调用)
init 系统初始化核心代码,不能裁剪
kernel 系统核心代码, 进程管理,不...
分类:
系统相关 时间:
2014-11-22 23:11:30
阅读次数:
374
我在STM32中移植了fatfs文件系统,实现在SD卡对文件的读写。在普通读写中都没有问题,但是一旦我关闭文件系统,再次打开读写,之前写的数据就被覆盖。比如举个例子: u8 tx_buff[]="stm32f107学习!!!" //发送缓冲1 u8 tx_buff1[]="文件系统学习!!!!"//...
分类:
其他好文 时间:
2014-11-17 15:43:48
阅读次数:
230
分布式文件系统即是网络中多台计算机组合在一起提供一个统一存储及管理的系统。Hadoop提供了一个文件系统接口和多个分布式文件系统实现,其中比较重要的就是HDFS(Hadoop Distributed Filesystem)了。Hadoop是一个综合性的文件系统抽象,因此它也可以集成其他文件系统的实现,如本地文件系统和Amazon S3系统及淘宝 TFS等。概念模型...
分类:
其他好文 时间:
2014-10-20 10:00:53
阅读次数:
281
一、基础环境两台IBMx3650M3,操作系统CentOS5.9x64,连接一台IBMDS3400存储,系统底层采用GFS文件系统实现文件共享,数据库是另一套独立的oraclerac集群,本架构无需考虑数据库的问题。GFS文件系统及相关配置见上一文IBMx3650M3+GFS+IPMIfence生产环境配置一例。本文是在上一..
分类:
其他好文 时间:
2014-08-29 02:57:37
阅读次数:
324