一。问题的由来： 二。解决问题的方法(所有的操作在root下完成)： 1.前期需要的环境，下面的已经在伪分布式中配置好，不再重复 配置好jdk 配置好hadoop 2.上传还需要包 apache-maven-3.0.5-bin.tar.gz和protobuf-2.5.0.tar.gz maven是项 ...
分类：
其他好文 时间：
2016-09-22 15:51:09
阅读次数：
202
本文的配置环境是VMware10+centos2.5。 在学习大数据过程中，首先是要搭建环境，通过实验，在这里简短粘贴书写关于自己搭建大数据伪分布式环境的经验。 如果感觉有问题，欢迎咨询评论。 一:伪分布式准备工作 1.规划目录 2.修改目录所有者和所属组 3.删除原有的jdk 4.上传需要的jdk ...
分类：
系统相关 时间：
2016-09-15 12:24:34
阅读次数：
246
Hadoop安装教程_伪分布式配置_CentOS6.4/Hadoop2.6.0 http://dblab.xmu.edu.cn/blog/install-hadoop-in-centos/ Spark快速入门指南 – Spark安装与基础使用 http://dblab.xmu.edu.cn/blog ...
分类：
其他好文 时间：
2016-09-01 18:01:36
阅读次数：
165
Hadoop伪分布式环境搭建： 自动部署脚本： 运行脚本： ...
分类：
其他好文 时间：
2016-09-01 12:49:59
阅读次数：
188
使用 RMI + ZooKeeper 实现远程调用框架，包括ZooKeeper伪集群安装和代码实现两部分。 一、ZooKeeper伪集群安装： 1》获取ZooKeeper安装包 下载地址：http://apache.dataguru.cn/zookeeper 选择一个稳定版本进行下载，我这里下载的是 ...
分类：
其他好文 时间：
2016-08-28 16:19:28
阅读次数：
138
1. /etc/profile JAVA_HOME, HADOOP_HOME export JAVA_HOME=export JRE_HOME=$JAVA_HOME/jre export CLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/lib export PATH=$JA ...
分类：
其他好文 时间：
2016-08-26 10:19:56
阅读次数：
147
1、本地连接远端用户没有权限 2、执行时提示，保存三分数据，但是只有一个节点是活的 问题1解决办法：在hdfs-site.xml文件中添加一下配置（是否在HDFS中开启权限检查） <property><name>dfs.permissions.enabled</name><value>false</ ...
分类：
其他好文 时间：
2016-08-25 20:29:00
阅读次数：
120
当开始着手实践 Hadoop 时，安装 Hadoop 往往会成为新手的一道门槛。尽管安装其实很简单，书上有写到，官方网站也有 Hadoop 安装配置教程，但由于对 Linux 环境不熟悉，书上跟官网上简略的安装步骤新手往往 Hold 不住。加上网上不少教程也甚是坑，导致新手折腾老几天愣是没装好，很是 ...
分类：
系统相关 时间：
2016-08-22 21:18:05
阅读次数：
278
一、Hadoop的3中运行模式 1.1、单机模式。安装简单，几乎不用作任何配置，但仅限于调试用途； 1.2、伪分布式模式。在单节点上同时启动namenode、secondary namenode、datanode、JobTracker、TaskTracker 5个进程，模拟分布式运行的各个节点。 1 ...
分类：
其他好文 时间：
2016-08-20 00:07:30
阅读次数：
142
