https://blog.csdn.net/hehe_soft_engineer/article/details/102820968 ...
分类:
其他好文 时间:
2019-11-01 22:42:36
阅读次数:
83
下载hadoop 2.7.7 网址如下 https://www eu.apache.org/dist/hadoop/core/ 移动到/opt 路径下 ...
分类:
其他好文 时间:
2019-11-01 18:12:16
阅读次数:
79
-mkdir 创建目录 hdfs dfs -mkdir [-p] < paths> -ls 查看目录下内容,包括文件名,权限,所有者,大小和修改时间 hdfs dfs -ls [-R] < args> -put 将本地文件或目录上传到HDFS中的路径 hdfs dfs -put < localsrc ...
分类:
其他好文 时间:
2019-11-01 09:34:15
阅读次数:
104
NN1 NN2 DN ZK ZKFC JNNNODE01 * * *NODE02 * * * * *NODE03 * * *NODE04 * * 1、首先让两个NameNode能互相免密钥,在前一部分中node01已经能免密登陆node02了,所以再让node02免密登陆自己和node01就行 2、 ...
分类:
其他好文 时间:
2019-10-31 23:28:46
阅读次数:
123
安装就安装 ,不扯其他的 hive 依赖 在 hive 安装前必须具备如下条件 1. 一个可连接的关系型数据库,如 Mysql,postgresql 等,用于存储元数据 2. hadoop,并启动 hdfs 3. HBase,非必须,但是如果不装,会有警告,不过不影响使用 4. java,1.8 以 ...
分类:
其他好文 时间:
2019-10-31 16:39:15
阅读次数:
107
import java.io.IOException; import java.util.StringTokenizer; import org.apache.hadoop.fs.Path; import org.apache.hadoop.io.IntWritable; import org.ap... ...
分类:
其他好文 时间:
2019-10-31 01:07:38
阅读次数:
59
1.保证hadoop集群没有问题,可以看下我另一个文章 https://www.cnblogs.com/zhangjiahao/p/10992171.html 2.下载上传zookeeper安装包 官网地址:http://mirror.bit.edu.cn/apache/zookeeper/ 3.解 ...
分类:
其他好文 时间:
2019-10-31 00:36:12
阅读次数:
81
日期:2019.10.30 博客期:114 星期三 实验6:Mapreduce实例——WordCount 实验说明: 1、 本次实验是第六次上机,属于验证性实验。实验报告上交截止日期为2018年11月16日上午12点之前。 2、 实验报告命名为:信1605-1班学号姓名实验六.doc。 实验目的 1 ...
分类:
其他好文 时间:
2019-10-30 18:50:47
阅读次数:
137
一、首先进入:/usr/local/bin 文件夹下,编写start-cluster.sh脚本 vim start-cluster.sh (需要root权限) 下面的各个节点的信息根据自身情况进行修改 保存,退出。修改执行权限 chmod 777 start-cluster.sh 运行: 二、编写s ...
分类:
系统相关 时间:
2019-10-29 22:05:03
阅读次数:
240
hive安装部署 hive是基于hadoop的一个数据仓库工具,可以将结构化的数据文件映射成一张数据库表,并提供简单的SQL查询功能,可以将SQL语句转换为Mapreduce任务进行运行 在data目录下创建hive1目录用于存放相关文件 下载hive和mysql connector 解压hive到 ...
分类:
其他好文 时间:
2019-10-29 21:38:08
阅读次数:
99