码迷,mamicode.com
首页 >  
搜索关键字:hdfs dfsadmin    ( 4996个结果
Hive学习(八)Hive数据导出三种方式
今天我们再谈谈Hive中的三种不同的数据导出方式。 根据导出的地方不一样,将这些方式分为三种: (1)、导出到本地文件系统; (2)、导出到HDFS中; (3)、导出到Hive的另一个表中。 为了避免单纯的文字,我将一步一步地用命令进行说明。 一、导出到本地文件系统    hive> insert overwrite local directory ...
分类:其他好文   时间:2014-10-29 19:24:32    阅读次数:233
在大并发写时,HBase的HDFS DFSClient端报SocketTimeoutExceptio
异常日志: 2012-03-02 12:11:21,983 WARN org.apache.hadoop.hdfs.DFSClient: DFSOutputStream ResponseProcessor exception? for block blk_1439491087566691588_6207java.net.SocketTimeoutException: 69000...
分类:其他好文   时间:2014-10-29 13:13:23    阅读次数:357
Mapreduce设置多路径输入输出
设置Mapreduce的输入是HDFS上多个文件夹下的数据,输出分文件夹存储。
分类:其他好文   时间:2014-10-29 01:39:29    阅读次数:241
namenode 和datanode无法启动,错误:FSNamesystem initialization failed. datanode.DataNode: Incompatible namespaceIDs
问题一:namenode无法启动,查看日志,错误信息如下:org.apache.hadoop.hdfs.server.namenode.FSNamesystem: FSNamesystem initialization failed.java.io.IOException: NameNode is ...
分类:其他好文   时间:2014-10-28 15:24:00    阅读次数:539
Cloudera impala简单介绍及安装具体解释
一、Impala简单介绍Cloudera Impala对你存储在Apache Hadoop在HDFS,HBase的数据提供直接查询互动的SQL。除了像Hive使用同样的统一存储平台,Impala也使用同样的元数据,SQL语法(Hive SQL),ODBC驱动程序和用户界面(Hue Beeswax)。...
分类:其他好文   时间:2014-10-28 15:23:23    阅读次数:467
吴超hadoop7天视频教程全集
一、初级班全套视频1、linux使用(3节)2、伪分布模式安装hadoop(2节)3、HDFS的体系结构和操作(2节)4、HDFS的java操作方式(4节)5、代码二、中级班全套视频1、MapReduce入门(2节)2、MapReduce的源码简介和自定义类型(4节)3、mapReduce的剩余核心环节讲解(5节)4、Map..
分类:其他好文   时间:2014-10-28 02:14:00    阅读次数:295
java操作hdfs到数据库或者缓存
javaAPI操作hdfs存入redis中...
分类:数据库   时间:2014-10-27 21:27:05    阅读次数:230
hadoop 常见问题
1、Eclipse 读取hdfs文件错误: java.io.IOException: Could not obtain block: blk_194219614024901469_1100 file=/user/hive/warehouse/src_20090724_log/src_20090724...
分类:其他好文   时间:2014-10-26 16:53:15    阅读次数:178
Mahout分步式程序开发 基于物品的协同过滤ItemCF
阅读导读: 1.简述用Mahout实现协同过滤ItemCF的步骤? 2.如何用API实现Hadoop的各种HDFS命令? 3.Kmeans.java类报错,暂时可以怎么处理? 1. Mahout开发环境介绍   在用Maven构建Mahout项目文章中,我们已经配置好了基于Maven的Mahout的开发环境,我们将继续完成Mahout的分步式的程序开发。   本文的...
分类:其他好文   时间:2014-10-26 14:23:16    阅读次数:297
mfs
user --> ha( 双机热备 436) --> lb( 调度器 ) --> 应用( www ftp ) --> sql( mysql pgsql oracle redis )--> 文件系统( mfs hdfs )--> i/o( ssd )RHCA 442 413 318虚拟:RHEV op...
分类:其他好文   时间:2014-10-25 15:48:54    阅读次数:602
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!