一、新建文本文件wordcount.txt,并上传至hdfs服务器上
[hadoop@cloud01 HDFSdemo]$ hadoop fs -cat /wc/wordcount.txt
hello world
hello China
hello wenjie
hello USA
hello China
hello China
hello Japan
[hadoop@c...
分类：
其他好文 时间：
2015-04-04 00:02:00
阅读次数：
314
现在我们将通过命令行与HDFS交互。HDFS还有很多其他接口，但命令行是最简单的，同时也是许多开发者最熟悉的。 在我们设置伪分布配置时，有两个属性需要进一步解释。首先是fs.default.name，设置为hdfs://localhos...
分类：
其他好文 时间：
2015-04-03 11:42:44
阅读次数：
148
Hadoop有一个抽象的文件系统概念，HDFS只是其中的一个实现。Java抽象类org.apache.hadoop.fs.FileSystem展示了Hadoop的一个文件系统，而且有几个具体实现，如表3-1所示。文件系统URI方案Java实现(全部在org.apache.hadoop)描述Localfilefs.LocalFileSystem针对有客户端校验和的..
分类：
其他好文 时间：
2015-04-03 11:34:26
阅读次数：
127
现在我们将通过命令行与HDFS交互。HDFS还有很多其他接口，但命令行是最简单的，同时也是许多开发者最熟悉的。在我们设置伪分布配置时，有两个属性需要进一步解释。首先是fs.default.name，设置为hdfs://localhost/,用来为Hadoop设置默认文件系统。文件系统是由URI指定的，这里..
分类：
其他好文 时间：
2015-04-03 11:31:11
阅读次数：
170
Hadoop有一个抽象的文件系统概念，HDFS只是其中的一个实现。Java抽象类 org.apache.hadoop.fs.FileSystem展示了Hadoop的一个文件系统，而且有几个具体实现，如表 3-1所示。
文件系统
URI
方案
Java实
现(全部在
org.apache.hadoop)
描述
Local
...
分类：
其他好文 时间：
2015-04-03 11:20:26
阅读次数：
116
现在我们将通过命令行与HDFS交互。HDFS还有很多其他接口，但命令行是最简单的，同时也是许多开发者最熟悉的。
在我们设置伪分布配置时，有两个属性需要进一步解释。首先是fs.default.name，设置为hdfs://localhost/,用来为Hadoop设置默认文件系统。文件系统是由URI指定的，这里我们已使用了一个hdfs URI 来配置HDFS为Hadoop的默认文件系统。HDFS的守...
分类：
其他好文 时间：
2015-04-03 11:18:47
阅读次数：
170
1 2 3 4 fs.default.name 5 hdfs://itcast:9000 6 ...
分类：
其他好文 时间：
2015-04-02 13:10:24
阅读次数：
99
HDFS集群有两种节点，以管理者-工作者的模式运行，即一个名称节点(管理者)和多个数据节点(工作者)。名称节点管理文件系统的命名空间。它维护着这个文件系统树及这个树内所有的文件和索引目录。这些信息以两种形式将文件永久保存在本地磁盘上：命名空间镜像和编辑日志。名称节点..
分类：
其他好文 时间：
2015-04-02 11:54:10
阅读次数：
676
HDFS集群有两种节点，以管理者-工作者的模式运行，即一个名称节点(管理者)和多个数据节点(工作者)。名称节点管理文件系统的命名空间。它维护着这个文件系统树及这个树内所有的文件和索引目录。这些信息以两种形式将文件永久保存在本地磁盘上：命名空间镜像和编辑日志。名称节点也记录着每个文件的每个块所在的数据节点，但它并不永久保存块的位置，因为这些信息会在系统启动时由数据节点重建。
客户端代表用户通过与名...
分类：
其他好文 时间：
2015-04-02 10:24:09
阅读次数：
181
制造namenode宕机的情况? 1) kill 掉namenode的进程 [hadoop@hadoop?bin]$?kill?-9?13481 2)删除dfs.name.dir所指向的文件夹，这里是/home/hadoop/hdfs/name. current??image??in_use.lock??previous....
分类：
其他好文 时间：
2015-04-02 06:56:49
阅读次数：
163
