//参照《鸟哥的Linux私房菜》之“简易NFS服务器设定”,只陈述设置过程1. 关于NFS(Network FileSystem)和RPC(Remote Procedure Call) NFS,即网络文件系统,作用:可以使本地主机通过网络将远程NFS主机分享的目录挂载到本地主机之中。 RPC,.....
分类:
系统相关 时间:
2014-12-06 22:45:13
阅读次数:
220
preface/prehight:topic: Storage(share fileSystem(可共享文件系统,Access I/O existence bottleNeck,access read/write space slowly),BSD(block storage device,file...
分类:
其他好文 时间:
2014-12-03 22:48:58
阅读次数:
116
HDFS案例代码Configuration configuration = new Configuration();FileSystem fileSystem = FileSystem.get(new URI("hdfs://hadoop000:8020"), configuration); ...
分类:
其他好文 时间:
2014-11-29 18:56:03
阅读次数:
310
Hbase简介Hbase是一个分布式的,面向列的开源数据库,该技术来源于Changetal所撰写的Google论文"Bigtable:一个结构化数据的分布式存储系统"就像Bigtable利用了Google文件系统(FileSystem)所提供的分布式数据存储一样,Hbase在Hadoop之上提供了类似于Bigtable的能力Hbase是Apache的..
分类:
其他好文 时间:
2014-11-26 06:47:41
阅读次数:
183
1 输入数据
import java.io.DataOutputStream;
import java.util.Random;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
/**
* 随机生成一批...
分类:
编程语言 时间:
2014-11-25 12:50:17
阅读次数:
205
spark程序异常:Exception in thread "main" java.io.IOException: No FileSystem for scheme: hdfs...
分类:
编程语言 时间:
2014-11-23 23:16:01
阅读次数:
396
由于aufs并未并入内核,故而目前只有Ubuntu系统上能够使用aufs作为docker的存储引擎,而其他系统上使用lvm thin provisioning(overlayfs是一个和aufs类似的union filesystem,未来有可能进入内核,但目前还没有;Lvm snapshot are...
分类:
其他好文 时间:
2014-11-19 22:04:34
阅读次数:
307
关于使用java api上传文件。 在定义一个FileSystem变量的时候伪分布式和单机版的方法是不一样的,单机版使用的是FileSystem类的静态函数FileSystem hdfs = FileSystem.get(conf)伪分布式下需要使用Path来获得Path dstDir = new ...
分类:
其他好文 时间:
2014-11-18 23:52:58
阅读次数:
239
一、挂载U盘现在我用的Ubuntu12.04在插入U盘时会直接挂载到/media/下,10:33linc@Linc-Ubuntu:linc$ df -h
Filesystem Size Used Avail Use% Mounted on
/dev/sdc 947M 638M 310M 68% /media/72D2-11E2
/dev/sdb 5.0...