码迷,mamicode.com
首页 >  
搜索关键字:hadoop 环境搭建    ( 22808个结果
Hadoop MapReduce编程入门案例
Hadoop MapReduce编程入门案例简析...
分类:其他好文   时间:2014-08-24 18:06:12    阅读次数:207
Hadoop使用注意事项-远程调用
在虚拟机中用rhel6.5装了单机伪分布式的Hadoop,在宿主机中使用JAVA API开发程序,遇到了一些问题及解决:1、连接不上关掉iptables,最简单粗暴的方法设置策略,允许远程访问端口才是正确的解决方式,具体方式还要学习。注意:要在root下调用哦#> service iptables ...
分类:其他好文   时间:2014-08-24 16:34:52    阅读次数:192
cocos2.2.3 HelloCpp TestCpp android 环境搭建 编译
cygwin makePATH->E:\cygwin\binJAVA_HOME->C:\Program Files\Java\jdk1.8.0_05Eclipse->Window->Preference:General->Workspace->Linked Resource New COCOS2DX...
分类:移动开发   时间:2014-08-24 14:11:22    阅读次数:251
Nginx日志导入到Hive0.13.1,同步Hbase0.96.2,设置RowKey为autoincrement(ID自增长)
目录: 一、Nginx的相关配置,以及测试数据 二、Hadoop中创建使用目录 三、Hive的日志表创建,并同步到Hbase中 1)创建自增长ID的类,并添加到Hive环境中 2)在Hive中创建日志表 3)将Nginx的日志数据导入到Hive日志表中 方法一:将本...
分类:其他好文   时间:2014-08-24 14:04:32    阅读次数:246
Hadoop MapReduce纵表转横表
输入数据如下:以\t分隔 0-3岁育儿百科 书 23 0-5v液位传感器 5 0-5轴承 2 0-6个月奶粉 23 0-6个月奶粉c2c报告 23 0-6个月奶粉在线购物排名 23 0-6个月奶粉市场前景 23 0-6个月配方奶粉 23 0.001g电子天平 5 0.01t化铝炉 2 0.01吨熔铝合金炉 2 0.03吨化镁炉 ...
分类:其他好文   时间:2014-08-24 11:43:42    阅读次数:171
spark运行java-jar:Exception in thread "main" java.io.IOException: No FileSystem for scheme: hdfs
今天碰到的一个 spark问题,困扰好久才解决首先我的spark集群部署使用的部署包是官方提供的spark-1.0.2-bin-hadoop2.tgz部署在hadoop集群上。在运行java jar包的时候使用命令java -jar chinahadoop-1.0-SNAPSHOT.jar chin...
分类:编程语言   时间:2014-08-24 08:04:42    阅读次数:321
spark上 spark-shell和java -jar访问hdfs路径问题
部署spark集群使用spark包spark-1.0.2-bin-hadoop2.tgz在spark-shell和java -jar访问hadoop hdfs上的文件写法是有区别的在spark-shell直接使用/user/ning/1.txt 之类的路径,不用加hdfs://host:port 的...
分类:编程语言   时间:2014-08-24 08:04:12    阅读次数:261
Hadoop 离线安装 CDH5.1 第二章:cloudera manager与agent 安装
新建cloudera-scm用户(做了分行,这个是一条linux命令,)[hadoop@mastercloudera-manager-5.1.0]$sudouseradd--system --home=/opt/cloudera-manager-5.1.0/run/cloudera-scm-server --no-create-home--shell=/bin/false--comment"ClouderaSCMUser"cloudera-scm改/opt/cloude..
分类:其他好文   时间:2014-08-24 04:09:52    阅读次数:274
ubuntu 下的 hadoop 安装
这两天一直在安装hadoop 道路比较曲折,记录一下 在redha...
分类:其他好文   时间:2014-08-23 21:40:21    阅读次数:214
Hadoop2.2.0 eclipse插件编译及Ecliipse配置说明(图文版)
hadoop eclipse plugin插件源码编译和Eclipse安装配置
分类:系统相关   时间:2014-08-23 18:59:21    阅读次数:392
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!