码迷,mamicode.com
首页 > 其他好文 > 详细

显示Hadoop文件系统中的路径的文件信息

时间:2015-03-07 11:32:15      阅读:135      评论:0      收藏:0      [点我收藏+]

标签:

FileSystem的listStatus方法的功能:列出目录中的内容

当传入的参数是一个文件时,它会转变成以数组的方式返回长度为1的FileStatus对象

当传入的参数是一个目录时,返回0或多个FileStatus对象,表示此目录中包含的文件和目录

 

如果指定一组路径,其执行结果相当于依次轮流传递每条路径并对其调用listStatus()方法,再将FileStatus对象数组累积存入同一数组中

 

注意FileUtil中stat2Paths()方法的使用,它将一个FileStatus对象数组转换为一个Path对象数组 

 

程序:

package com.lcy.hadoop.file;

import java.net.URI;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FileStatus;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.FileUtil;
import org.apache.hadoop.fs.Path;

public class ListStatus {

    public static void main(String[] args) throws Exception{
        // TODO Auto-generated method stub
        String uri=args[0];
        Configuration conf=new Configuration();
        FileSystem fs=FileSystem.get(URI.create(uri),conf);
        
        Path[] paths=new Path[args.length];
        for(int i=0;i<paths.length;i++){
            paths[i]=new Path(args[i]);
        }
        FileStatus[] status=fs.listStatus(paths);
        Path[] listedPaths=FileUtil.stat2Paths(status);
        for(Path p:listedPaths){
            System.out.println(p);
        }
    }
}

 

运行示例:显示一组路径集目录列表的并集

技术分享

显示Hadoop文件系统中的路径的文件信息

标签:

原文地址:http://www.cnblogs.com/Murcielago/p/4319904.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!