码迷,mamicode.com
首页 >  
搜索关键字:HIVE    ( 5904个结果
Hive窗口函数
1、row_number over():分组排序+序号标记 假如我们有这样一组数据,我们需要求出不同性别的年龄top2的人的信息。这个时候怎么做?可能我们会首先想到分组,但是分组只能值top1,怎么样能求出top2,top3呢?这时候我们想如果分组后能够按照年龄排序然后标出来序号就好了! id ag ...
分类:其他好文   时间:2020-02-13 17:21:11    阅读次数:75
Hive事务原理和Datax同步事务表问题解决
一、事务的概述 1、定义 事务就是一组单元化操作,这些操作要么都执行,要么都不执行,是一个不可分割的工作单位。 2、特点 事务(transaction)具有的四个要素:原子性(Atomicity)、一致性(Consistency)、隔离性(Isolation)、持久性(Durability)。这四个 ...
分类:其他好文   时间:2020-02-13 12:41:40    阅读次数:228
3.1
基础概述 Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的SQL查询功能,可以将SQL语句转换为MapReduce任务进行运行。 其优点是学习成本低,可以通过类SQL语句快速实现简单的MapReduce统计,不必开发专门的MapReduce应用,十 ...
分类:其他好文   时间:2020-02-12 22:01:50    阅读次数:67
寒假记录十二
Sqoop概述 Sqoop是一款开源的工具,主要用于在Hadoop生态系统(Hadoop、Hive等)与传统的数据库(MySQL、Oracle等)间进行数据的传递,可以将一个关系型数据库中的数据导入到Hadoop的HDFS中,也可以将HDFS的数据导入到关系型数据库中。 Sqoop导入原理: 在导入 ...
分类:其他好文   时间:2020-02-12 14:33:53    阅读次数:82
Hive中unix_timestamp和from_unixtime的用法
unix_timestamp的用法: unix_timestamp(String str) 如果参数str格式满足yyyy-MM-DD HH:mm:ss格式,例如:str值为2020-02-02 02:02:02,用法为 select unix_timestamp(2020-02-02 02:02: ...
分类:其他好文   时间:2020-02-12 13:19:55    阅读次数:181
[Oracle]Audit(二)--清理Audit数据
[Oracle]Audit(二)--清理Audit数据 在上一篇,初步了解了Audit的作用以及如何使用Audit,本篇记录如何手动清理Audit数据。 (一) 概述 Audit的数据主要存储在sys.aud$表中,该表默认位于system表空间中,我们根据需求,将该表移到了sysaux表空间中。由 ...
分类:数据库   时间:2020-02-12 11:19:02    阅读次数:143
#IT明星不是梦#Hive面试总结
1、Hive导出数据有几种方式?如何导出数据(1)insert导出本地:insertoverwritelocaldirectory‘本地路径‘select*from表名;导出到HDFS:insertoverwritedirectory‘hdfs路径‘select*from表名;(2)hadoop命令hdfsdfs-get/user/hive/warehouse/st
分类:其他好文   时间:2020-02-11 11:50:10    阅读次数:59
C# Activator和new的区别
1、你需要动态的创建一个实例模型的时候,就用Activator.CreateInstance(Type type);如果是明确的知道要创建哪个实例的模型,就可以用 new Class()了 2、基于接口的Remoting对象是不能用new来创建的,可以直接使用Activator来创建 3、C 中Ac ...
分类:Windows程序   时间:2020-02-10 22:12:47    阅读次数:93
hive同环比实现
select a.date , a.measure , case when b.measure is null or b.measure=0 then null else concat( cast( cast((if(a.measure is null, 0, a.measure)-if(b.mea ...
分类:其他好文   时间:2020-02-10 13:56:06    阅读次数:154
16、Hive数据倾斜与解决方案
Hive数据倾斜与解决方案
分类:其他好文   时间:2020-02-10 11:22:02    阅读次数:57
5904条   上一页 1 ... 50 51 52 53 54 ... 591 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!