基于Hadoop的sqoop组件的部署 什么是 Sqoop Sqoop 是一款开源的工具,主要用于在 Hadoop(Hive)与传统的数据库(mysql、postgresql...) 间进行数据的传递,可以将一个关系型数据库(例如 : MySQL ,Oracle ,Postgres 等)中的 数据导 ...
分类:
其他好文 时间:
2021-04-26 13:03:24
阅读次数:
0
下载到导入的jar包 maven-source-plugin-2.2.1.jar 使用命令导入: mvn install:install-file -Dfile=D:\opensource\maven-source-plugin-2.2.1.jar -DgroupId=org.apache.mave ...
分类:
编程语言 时间:
2021-04-24 13:46:44
阅读次数:
0
kafka功能简单测试 启动zookeeper 启动zk命令: ./zhServer.sh start 启动akfka(注意server.properties的配置) 启动akfka命令:./kafka-server-start.sh /home/hadoop/app/kafka_2.11-0.9. ...
分类:
其他好文 时间:
2021-04-24 13:16:11
阅读次数:
0
我的idea使用maven引入依赖没有成功,只能下载jar包 下载jar包地址: http://repo.e-iceblue.com/nexus/content/groups/public/e-iceblue/spire.xls.free/ pom.xml中配置jar所在路径 <dependency ...
分类:
其他好文 时间:
2021-04-23 12:25:08
阅读次数:
0
在eclipse中,通过maven导入工程后,打开jflow.properties文件后出现注释乱码,如图所示: 解决步骤如下: 步骤1:在eclipse 中点击菜单“window” 步骤2:在window弹出窗体点击“Preferences“ 步骤3:在Preferences窗体选择General ...
分类:
系统相关 时间:
2021-04-21 12:38:23
阅读次数:
0
初学者很容易出现的问题,可能会很困扰 springboot启动时报错 错误: 找不到或无法加载主类 com.xxx.xxx.Application 解决起来很简单: 刷新一下maven Reload All Maven Projects ...
分类:
移动开发 时间:
2021-04-21 12:37:38
阅读次数:
0
关于Maven中产生的一些问题 一、项目的打包类型 jar 默认的打包格式 war 打包成需要部署的项目 pom 父类型为pom类型 二、 pom 简单来说,一个多模块项目通过一个父POM 引用一个或多个子模块来定义。 项目中一般使用maven进行模块管理,每个模块下对应都有一个pom文件,pom文 ...
分类:
其他好文 时间:
2021-04-21 12:20:01
阅读次数:
0
1:下载地址 http://mirrors.hust.edu.cn/apache/sqoop/1.4.6/ 2:上传压缩包 scp sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz root@hadoop2:/opt/software 3:解压并重命名 tar - ...
分类:
其他好文 时间:
2021-04-21 12:09:16
阅读次数:
0
记录创建springboot项目并配置mybatis中间件: 资源准备及版本说明 编程工具:IDEA JDK版本:1.8 Maven版本:Apache Maven 3.6.3 springboot版本:2.4.4 mybatis版本:1.3.2 mysql版本:5.1.48 创建mavem项目 通过 ...
分类:
编程语言 时间:
2021-04-20 15:04:13
阅读次数:
0
一、词频统计: 1.读文本文件生成RDD lines lines = sc.textFile('file:///home/hadoop/word.txt') 2.将一行一行的文本分割成单词 words flatmap() words=lines.flatMap(lambda line:line.sp ...
分类:
其他好文 时间:
2021-04-20 15:02:06
阅读次数:
0