启动hadoop2.x historyserver（不启动historyserver的话，pig任务结束后，会报连接不上10020端口） ./mr-jobhistory-daemon.sh start historyserver [root@ylchou ?sbin]# ./mr-jobhistory-daemon.sh start hist...
分类：
其他好文 时间：
2015-11-06 01:43:13
阅读次数：
199
分给我的云服务器只有2台= = 所以只用两台来搭建~多台也就是多配几个slave节点木有关系的啦~那么下来开始啦一、首先准备好编译过的hadoop2.6版本,以及相关jar包~准备开始搞啊~解压命令是 tar zxvf xxxxxxx(文件名)创建tmp路径 用于hadoop相关路径mkdir tm...
分类：
其他好文 时间：
2015-10-31 15:39:02
阅读次数：
462
在hadoop1中核心组成部分是HDFS、MapReduce，到了Hadoop2，核心变为HDFS、Yarn，而且新的HDFS中可以有多个NameNode，每个都有相同的职能。以下内容是从http://www.superwu.cn/2014/02/12/1094/阅读后自己总结了一下：配置文件无非就...
分类：
其他好文 时间：
2015-10-31 12:58:44
阅读次数：
211
1、在Linux下安装ICTCLAS2015?1) 环境 Eclipse、Linux、ICTCLAS2015、jna-platform-4.1.0.jar（ JNA类库）?2) 安装ICTCLAS2015 在Linux下的 Eclipse中新建MapReduce Project，假设工程名为RF.....
分类：
其他好文 时间：
2015-10-28 17:03:43
阅读次数：
299
[hadoop@master ?~]$? [hadoop@master ?~]$ hadoop jar /opt/hadoop-2.5.2/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.5.2.jar ?pi 100 100 Error creating temp dir in hadoop.tmp.dir /home/hado...
分类：
其他好文 时间：
2015-10-28 01:54:03
阅读次数：
260
1. ?访问hadoop官网下载hadoop-2.7.1-src.tar.gz tar?-zxvf?hadoop-2.7.1-src.tar.gz
cd?hadoop-2.7.1-src
vi?BUILDING.txt Requirements:
*?Unix?System
*?JDK?1.7+
*?Maven?3.0?or?later
*?Fin...
分类：
其他好文 时间：
2015-10-26 09:22:11
阅读次数：
618
hadoop2.6.0+hive1.2启动报错java.lang.IncompatibleClassChangeError
分类：
编程语言 时间：
2015-10-26 00:01:38
阅读次数：
141
1、下载并配置插件将下载的hadoop-eclipse-plugin-2.6.0.jar 放到Eclipse的dropins目录下，重启Eclipse.2、配置 hadoop 安装目录window ->preference -> hadoop Map/Reduce -> Hadoop install...
分类：
系统相关 时间：
2015-10-23 18:08:50
阅读次数：
311
Error Message: ????????"The program can‘t start because MSCVR100.dll is missing from your? computer. Try reinstalling the program to fix this issue" 解决方法:下载?dff_fdp2-msvcr100.exe 安...
分类：
其他好文 时间：
2015-10-23 00:20:26
阅读次数：
225
前言，之前曾多次搭建集群，由于疏于记录，每次搭建的时候到处翻阅博客，很是费劲，在此特别记录集群的搭建过程。0、环境：Ubuntu14.10、Hadoop2.6.0、spark-1.4.01、安装jdk1.7 （1）下载jdk-7u25-linux-i586.tar.gz； （2）解压jdk-7u.....
分类：
系统相关 时间：
2015-10-22 18:49:49
阅读次数：
2414
