本文对Hadoop+HBase+Spark+Hive环境搭建方法和步骤进行了详细介绍和说明，记录于此，供各位同学及自己参考研究。 ...
分类：
其他好文 时间：
2021-02-05 10:38:53
阅读次数：
0
java电子书 下载全部java电子书 链接: https://pan.baidu.com/s/1AsLTMzc8k4_X5xUswbw2_Q 密码: vvu1 java编程思想pdf 下载：百度网盘 链接: https://pan.baidu.com/s/1zYal1aaiLs0zO8vwirYM ...
分类：
编程语言 时间：
2021-02-05 10:37:18
阅读次数：
0
java电子书 下载全部java电子书 链接: https://pan.baidu.com/s/1AsLTMzc8k4_X5xUswbw2_Q 密码: vvu1 java编程思想pdf 下载：百度网盘 链接: https://pan.baidu.com/s/1zYal1aaiLs0zO8vwirYM ...
分类：
编程语言 时间：
2021-02-05 10:36:44
阅读次数：
0
java电子书 下载全部java电子书 链接: https://pan.baidu.com/s/1AsLTMzc8k4_X5xUswbw2_Q 密码: vvu1 java编程思想pdf 下载：百度网盘 链接: https://pan.baidu.com/s/1zYal1aaiLs0zO8vwirYM ...
分类：
编程语言 时间：
2021-02-05 10:35:44
阅读次数：
0
备注：此处的hadoop版本是3.1.4 一、配置集群 1.1、配置yarn-site.xml <!-- Reducer获取数据的方式 --> <property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle ...
分类：
其他好文 时间：
2021-02-02 10:48:15
阅读次数：
0
UDF：用户定义（普通）函数，只对单行数值产生作用；UDF只能实现一进一出的操作。UDF函数自定义实现步骤如下： 定义UDF函数，如计算两个数之和 package com.starzy.udf; import org.apache.hadoop.hive.ql.exec.UDF; public cl ...
分类：
其他好文 时间：
2021-02-01 12:38:19
阅读次数：
0
Hadoop搭建HA遇到的坑 重要报错信息 Zookeeper日志 Cannot open channel to 2 at election address node03/172.17.0.4:3888 java.net.ConnectException: Connection refused (C ...
分类：
其他好文 时间：
2021-02-01 12:17:43
阅读次数：
0
环境是hive和Hadoop 报错如：User: liwei is not allowed to impersonate anonymous 修改hadoop 配置文件 $HADOOP_HOME/etc/hadoop/core-site.xml <property> <name>hadoop.pro ...
分类：
编程语言 时间：
2021-01-27 13:53:02
阅读次数：
0
<！-- demodemo.xml --><dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-mapreduce-client-core</artifactId> <version>2.7.0</version> ...
分类：
其他好文 时间：
2021-01-26 12:23:58
阅读次数：
0
1 RDD基础知识 1.1 Spark的RDD五大特性 1.1.1 A list of partitions RDD是一个由多个partition（某个节点里的某一片连续的数据）组成的的List；将数据加载为RDD时，一般一个hdfs里的block会加载为一个partition。 对于RDD来说，每 ...
分类：
其他好文 时间：
2021-01-25 11:30:09
阅读次数：
0
