Sqoop概述 Sqoop是一款开源的工具,主要用于在Hadoop生态系统(Hadoop、Hive等)与传统的数据库(MySQL、Oracle等)间进行数据的传递,可以将一个关系型数据库中的数据导入到Hadoop的HDFS中,也可以将HDFS的数据导入到关系型数据库中。 Sqoop导入原理: 在导入 ...
分类:
其他好文 时间:
2020-02-12 14:33:53
阅读次数:
82
unix_timestamp的用法: unix_timestamp(String str) 如果参数str格式满足yyyy-MM-DD HH:mm:ss格式,例如:str值为2020-02-02 02:02:02,用法为 select unix_timestamp(2020-02-02 02:02: ...
分类:
其他好文 时间:
2020-02-12 13:19:55
阅读次数:
181
[Oracle]Audit(二)--清理Audit数据 在上一篇,初步了解了Audit的作用以及如何使用Audit,本篇记录如何手动清理Audit数据。 (一) 概述 Audit的数据主要存储在sys.aud$表中,该表默认位于system表空间中,我们根据需求,将该表移到了sysaux表空间中。由 ...
分类:
数据库 时间:
2020-02-12 11:19:02
阅读次数:
143
通常我们会使用Windows自动的格式化 对应的命令为: 参考 "快速格式化" ...
分类:
其他好文 时间:
2020-02-11 14:33:47
阅读次数:
72
1、Hive导出数据有几种方式?如何导出数据(1)insert导出本地:insertoverwritelocaldirectory‘本地路径‘select*from表名;导出到HDFS:insertoverwritedirectory‘hdfs路径‘select*from表名;(2)hadoop命令hdfsdfs-get/user/hive/warehouse/st
分类:
其他好文 时间:
2020-02-11 11:50:10
阅读次数:
59
1、你需要动态的创建一个实例模型的时候,就用Activator.CreateInstance(Type type);如果是明确的知道要创建哪个实例的模型,就可以用 new Class()了 2、基于接口的Remoting对象是不能用new来创建的,可以直接使用Activator来创建 3、C 中Ac ...
select a.date , a.measure , case when b.measure is null or b.measure=0 then null else concat( cast( cast((if(a.measure is null, 0, a.measure)-if(b.mea ...
分类:
其他好文 时间:
2020-02-10 13:56:06
阅读次数:
154
在安装完hive之后(hadoop-2.10.0安装hive-2.3.6),已经迫不及待的想尝试一下hive的一些用法,我们最常用的就是直接输入hive回车,使用的是cli(Command Line Interface )模式,下面介绍一下hive的使用以及一些常用的命令 1.首先查看hive帮助, ...
分类:
其他好文 时间:
2020-02-10 00:00:22
阅读次数:
99
Hive简介 http://www.coin163.com/it/4435084950725826127 Hive的数据类型 https://cloud.tencent.com/developer/article/1165300 把HDFS上的数据导入到Hive中等操作 https://www.cn ...
分类:
Web程序 时间:
2020-02-09 16:14:33
阅读次数:
73