码迷,mamicode.com
首页 >  
搜索关键字:hdfs数据迁移 hadoop    ( 13957个结果
使用Eclipse&Ant编译hadoop1.x的eclipse插件
注意:以下操作基于Hadoop-1.2.1,Eclipse Luna 1、将hadoop eclipse插件的工程导入Eclipse。插件源码目录如下: D:\Lab\lib\hadoop\hadoop-1.2.1\src\contrib\eclipse-plugin 2、配置工程依赖 3、准备ant的配置文...
分类:系统相关   时间:2014-08-23 16:58:21    阅读次数:410
hadoop 点点滴滴(一)
1. hbase0.98.0,0.95.2,0.94.9bug2013-06-11 21:51:22,199 ERROR [IPC Server handler 18 on 60000] master.HMaster: Region server ip-10-138-2-28.ec2.interna...
分类:其他好文   时间:2014-08-23 15:17:30    阅读次数:277
Hadoop实战-中高级部分 之 Hadoop作业调优参数调整及原理
第一部分:core-site.xml?core-site.xml为Hadoop的核心属性文件,参数为Hadoop的核心功能,独立于HDFS与MapReduce。参数列表?fs.default.name?默认值 file:///?说明:设置Hadoop namenode的hostname及port,预...
分类:其他好文   时间:2014-08-23 15:13:50    阅读次数:217
hadoop 点点滴滴(二)
hadoop2.0 yarn 内存溢出问题解决异常提示:Container [pid=20170,containerID=container_1390877171119_0002_01_000005] is running beyond virtual memory limits. Current ...
分类:其他好文   时间:2014-08-23 15:12:51    阅读次数:218
hadoop 点点滴滴(三)
AttemptID:attempt_1390962167768_0001_m_000026_0 Timed out after 600 secs14/01/29 10:56:54 INFO mapreduce.Job: map 13% reduce 0%14/01/29 10:57:28 INFO ...
分类:其他好文   时间:2014-08-23 15:11:20    阅读次数:591
[HBase]ERROR: Region is not online
重启HBase后,进入hbase shell 进行 scan 、get 、create等操作均报错:ERROR: org.apache.hadoop.hbase.NotServingRegionException: org.apache.hadoop.hbase.NotServingRegionEx...
分类:其他好文   时间:2014-08-23 15:10:00    阅读次数:249
YARN加载本地库抛出Unable to load native-hadoop library解决办法
YARN加载本地库抛出Unable to load native-hadoop library解决办法用官方的Hadoop2.1.0-beta安装后,每次hadoop命令进去都会抛出这样一个WarningWARN util.NativeCodeLoader: Unable to load nativ...
分类:其他好文   时间:2014-08-23 12:30:40    阅读次数:282
hadoop 读写 elasticsearch 初探
1、参考文档:http://www.elasticsearch.org/guide/en/elasticsearch/hadoop/current/configuration.htmlhttp://www.elasticsearch.org/guide/en/elasticsearch/hadoop...
分类:其他好文   时间:2014-08-23 09:58:30    阅读次数:213
hadoop rpc基础
第一部分: hadoop rpc基础RPC,远程程序调用,分布式计算中C/S模型的一个应用实例。同其他RPC框架一样,Hadoop分为四个部分:序列化层:支持多种框架实现序列化与反序列化函数调用层:利用java反射与动态代理实现网络传输层:基于TCP/IP的Socket机制服务的处理框架:基于Rea...
分类:其他好文   时间:2014-08-23 01:06:09    阅读次数:277
win7+cygwin+hadoop+eclipse
1、Cygwin :Net 下的:openssh,opensslBase 下的:sed (若需要Eclipse,必须sed)默认即可Devel 下的:subversion(建议安装) 2、jdk 安装后在根目录解压jdk,并配置到环境变量:export PATH=$PATH:$JAVA...
分类:Windows程序   时间:2014-08-22 23:45:29    阅读次数:298
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!