1.1.1.读取Socket数据 ●准备工作 nc -lk 9999 hadoop spark sqoop hadoop spark hive hadoop ●代码演示： import org.apache.spark.SparkContext import org.apache.spark.sql ...
分类：
其他好文 时间：
2019-09-11 10:06:19
阅读次数：
126
基于kubernetes部署JAVA项目将项目迁移到k8s平台是怎样实现的?1制作镜像2控制器管理Pod3Pod数据持久化4暴露应用5对外发布应用6日志/监控1制作镜像分为三步：第一基础镜像，是基于哪个操作系统，比如Centos7或者其他的第二步中间件镜像，比如服务镜像，跑的像nginx服务，tomcat服务第三步项目镜像，它是服务镜像之上的，将你的项目打包进去，那么这个项目就能在你这个服务镜像里
分类：
编程语言 时间：
2019-09-10 22:07:11
阅读次数：
122
第一种（推荐使用）：import org.apache.hadoop.hive.ql.exec.UDF;import java.util.Calendar;public class GetAge extends UDF { public String evaluate(String sfzjh){ ...
分类：
编程语言 时间：
2019-09-10 16:20:06
阅读次数：
797
最近买了一本hive看，发现书中有一个错误： 我的验证如下： 1.外部表数据存在自己表所属的目录下 2.还发现了 CTAS 操作不能 建立外部表 ...
分类：
其他好文 时间：
2019-09-08 09:18:19
阅读次数：
85
[TOC] 以前对makefile的编写，限于刚开始接触，我都比较局限一些死板的格式，有时候就会显得有些繁琐。在进一步了解一些系统编译和链接的知识后，对makefile编写流程有了一些新的认识，所以来此梳理梳理，方便更为灵活地编写makefile。 关于makefile makefile 带来直接好 ...
分类：
其他好文 时间：
2019-09-06 18:47:35
阅读次数：
81
1.下载JDK Oracle官网JDK归档：https://www.oracle.com/technetwork/java/javase/archive-139210.html 根据官方的版本归档下载自己要下载的版本，这里以1.8.0_60为例。 先选择接受许可证协议，然后再选择对应的平台版本，这里 ...
分类：
数据库 时间：
2019-09-06 16:15:21
阅读次数：
460
Java中如何输出像1-2-3-4-5 这样的字符 抱歉对于这个问题我甚至不能想到一个合适的标题，但是不重要 以下操作基于 jdk 1.8 在1.8版本中新加了 一个’StringJoiner‘ 方法 StringJoiner是java.util包中的一个类，用于构造一个由分隔符分隔的字符序列（可选 ...
分类：
编程语言 时间：
2019-09-05 13:42:08
阅读次数：
91
安装hive 1.添加环境变量 18 HIVE_HOME=/home/abby/module/hive-1.1.0-cdh5.15.0 19 PATH=$PATH:$HIVE_HOME/bin 2.修改hive-env.sh 位于 /home/abby/module/hive-1.1.0-cdh5. ...
分类：
其他好文 时间：
2019-09-05 09:11:35
阅读次数：
100
第4章 DDL数据定义 4.1 创建数据库 1）创建一个数据库，数据库在HDFS上的默认存储路径是/user/hive/warehouse/*.db。 2）避免要创建的数据库已经存在错误，增加if not exists判断。（标准写法） 3）创建一个数据库，指定数据库在HDFS上存放的位置 4.2 ...
分类：
其他好文 时间：
2019-09-05 01:13:22
阅读次数：
110
第3章 Hive数据类型 3.1 基本数据类型 对于Hive的String类型相当于数据库的varchar类型，该类型是一个可变的字符串，不过它不能声明其中最多能存储多少个字符，理论上它可以存储2GB的字符数。 3.2 集合数据类型 Hive有三种复杂数据类型ARRAY、MAP 和 STRUCT。A ...
分类：
其他好文 时间：
2019-09-05 00:50:48
阅读次数：
79
