码迷,mamicode.com
首页 >  
搜索关键字:hadoop 环境搭建    ( 22808个结果
Speculative Execution in Hadoop
来自:http://blog.csdn.net/macyang/article/details/7880671所谓的推测执行,就是当所有task都开始运行之后,Job Tracker会统计所有任务的平均进度,如果某个task所在的task node机器配置比较低或者CPU load很高(原因很多),...
分类:其他好文   时间:2014-07-09 21:05:18    阅读次数:248
Java操作Hbase进行建表、删表以及对数据进行增删改查,条件查询
1、搭建环境 新建JAVA项目,添加的包有: 有关Hadoop的hadoop-core-0.20.204.0.jar 有关Hbase的hbase-0.90.4.jar、hbase-0.90.4-tests.jar以及Hbase资源包中lib目录下的所有jar包2、主要程序Java代码packagec...
分类:编程语言   时间:2014-07-09 00:42:53    阅读次数:384
在Ubuntu下配置运行Hadoop2.4.0单节点配置
还没有修改hosts,请先按前文修改。 还没安装java的,请按照前文配置。 (1)增加用户并设立公钥: sudo addgroup hadoop sudo adduser --ingroup hadoop hduser su - hduser cat $HOME/.ssh/id_rsa.pub >...
分类:其他好文   时间:2014-07-08 22:57:08    阅读次数:329
【ALearning】第二章 Android工程相关知识介绍
本章主要初步介绍Android工程开发环境的搭建,以对Android项目整体的认识与了解。本章包括Android开发环境搭建、第一个Android项目Hello World与Android项目的文件目录结构介绍。...
分类:移动开发   时间:2014-07-08 18:11:26    阅读次数:193
sqoop安装部署(笔记)
sqoop是一个把关系型数据库数据抽向hadoop的工具。同时,也支持将hive、pig等查询的结果导入关系型数据库中存储。由于,笔者部署的hadoop版本是2.2.0,所以sqoop的版本是:sqoop-1.99.3-bin-hadoop2001、下载sqoop wget http://mirro...
分类:其他好文   时间:2014-07-06 15:37:41    阅读次数:138
hadoop安装配置——伪分布模式
1. 安装这里以安装hadoop-0.20.2为例先安装java,参考这个去着下载hadoop解压tar -xzf hadoop-0.20.22. 配置修改环境变量vim ~/.bashrcexport HADOOP_HOME=/home/rte/hadoop-0.20.2 #这里为实际hado.....
分类:其他好文   时间:2014-07-06 15:12:24    阅读次数:255
Hadoop 2.2.0部署安装(笔记,单机安装)
SSH无密安装与配置具体配置步骤:◎在root根目录下创建.ssh目录(必须root用户登录)cd/root&mkdir.sshchmod700.ssh&cd.ssh◎创建密码为空的RSA密钥对:ssh-keygen-trsa-P""◎在提示的对称密钥名称中输入id_rsa将公钥添加至authori...
分类:其他好文   时间:2014-07-06 13:08:10    阅读次数:280
Android开发环境搭建
昨天又搭建了一次Android的开发环境,尝试了好几种方式,也遇到了一些问题,在此分享一下。       注意:官网发布的最新版本的SDK和ADT(23.0.0),对于和Eclipse集成的开发环境是有BUG存在的。搭建完成建立HelloWorld测试的时候,src和layout文件下的文件都为空。所以最好还是下载之前版本,我最终安装成功的就是使用了前一个版本的SDK和ADT(22.6....
分类:移动开发   时间:2014-07-06 10:15:51    阅读次数:340
Hadoop 2.2.0 常见问题之:Ubuntu 64环境下“Unable to load native-hadoop library for your platform”问题”
问题 最近在学习Hadoop(2.2.0),打算写一个MapReduce的小程序在Ubuntu 64位的环境下测试一把,一切环境配置完毕后,执行的过程中,控制台输出下面的内容: WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java clas...
分类:其他好文   时间:2014-07-06 00:46:04    阅读次数:434
Hadoop源码导入Eclipse
需要进一步学习hadoop、需要看看内部源码实现,因此需要将hadoop源码导入都eclipse中,简单总结一下,具体步骤如下: 首先确保已经安装了git、maven3、protobuf2.5、如果没有安装需要提前安装一下 1、下载hadoop源码 git clone git://git.apache.org/hadoop-common.git 2、进入hadoop-common目录,...
分类:系统相关   时间:2014-07-05 23:37:02    阅读次数:288
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!