下载maven版本: 1、进入官网:http://maven.apache.org/download.cgi ,下载编译后的maven版本;如图下: 2、创建一个目录,把下载的maven压缩包,进行解压,如: 配置maven环境变量: 1、新建系统变量: 2、把步骤一中自定义的变量名,添加至Path ...
分类:
系统相关 时间:
2018-09-11 23:50:19
阅读次数:
3544
我们先搭建本地环境 准备的两个工具 将winutils中的两个文件拷贝 配置环境变量 将日志文件拷贝到我们新建的Eclipse中的Maven项目中 编写Mapper 编写Reduce 编写主类 我们来运行一下 我们先打一个JAR包 我导出到本地项目中了 将包上传到我们的虚拟机中 上传我们的测试文件 ...
分类:
其他好文 时间:
2018-09-04 19:10:42
阅读次数:
158
一、SpringBoot2.x依赖环境和版本新特性说明简介:讲解新版本依赖环境和springboot2新特性概述1、依赖版本jdk8以上,Springboot2.x用JDK8,因为底层是Springframework5,2、安装maven最新版本,maven3.2以上版本,下载地址:https://maven.apache.org/download.cgi3、Eclipse或者IDE4、新特性5、
分类:
编程语言 时间:
2018-08-31 13:16:14
阅读次数:
367
1. Hive是什么 Hive是基于Hadoop的数据仓库解决方案。由于Hadoop本身在数据存储和计算方面有很好的可扩展性和高容错性,因此使用Hive构建的数据仓库也秉承了这些特性。 这是来自官方的解释。 简单来说,Hive就是在Hadoop上架了一层SQL接口,可以将SQL翻译成MapReduc ...
分类:
其他好文 时间:
2018-08-19 23:21:17
阅读次数:
203
问题 上传文件到Hadoop异常,报错信息如下: 解决 1、查看问题节点的进程情况: DataNode进程没有启动 2、进入问题节点,查看Hadoop datanode.log信息 报错的信息为,namenode clusterID 与 datanode clusterID 不一致! 回想了下,出现 ...
分类:
Web程序 时间:
2018-08-17 15:30:02
阅读次数:
212
一、环境搭建 使用maven搭建testng测试框架 1.在apache官网下载并安装maven,解压maven压缩包; 2.配置maven的环境变量 M2_HOME D:\Program Files\apache-maven-3.0.5 path %M2_HOME%\bin; 3. 找的.m2文件 ...
分类:
其他好文 时间:
2018-08-12 20:01:19
阅读次数:
158
1.找到安装maven的路径 2.直接搜索settings.xml文件 镜像仓库缓存阿里的,速度立马飙上去了 ...
分类:
其他好文 时间:
2018-08-11 13:53:09
阅读次数:
133
今天在做代码重构,以前将所有python文件放到一个文件夹下,上传到hadoop上跑,没有问题;不过随着任务的复杂性增加,感觉这样甚是不合理,于是做了个重构,建了好几个包存放不同功能的python文件,历程如下: 1. 刚开始的时候,在IDE里搞,点击运行,正确、非常赞; 2. 然后搬到服务器上搞, ...
分类:
编程语言 时间:
2018-08-10 19:51:12
阅读次数:
998
Mac下安装maven步骤如下: 1. 下载maven, http://maven.apache.org/download.cgi下载 2. 下载后解压在Downloads下 3. 配置 Maven 环境变量。 ① 打开终端 ,输入vim ~/.bash_profile ② 输入 i进入编辑模式,然 ...
分类:
系统相关 时间:
2018-08-10 18:03:17
阅读次数:
744
如果在创建项目时候,没有“创建一个Maven 项目”的选项。 你需要安装Maven项目插件:Maven Integration plugin 。 点击“可选插件” 然后在右边的过滤输入框中输入搜索关键字: Maven Integration Plugin 或者 Pipeline Maven Inte ...
分类:
其他好文 时间:
2018-08-08 14:51:08
阅读次数:
152