码迷,mamicode.com
首页 > 其他好文 > 详细

一句话从 Hive 取每组前三名

时间:2020-05-19 23:03:04      阅读:93      评论:0      收藏:0      [点我收藏+]

标签:运算   from   blank   方法   函数   大于   imp   lan   不容易   

Hive 实现这个用到了窗口函数,以及子查询,写出来也不容易,如下

SELECT *  
FROM  (
        SELECT g, ROW_NUMBER() OVER(PARTITION BY g
        ORDER BY x) group_id RN FROM A
)
WHERE group_id <= 3
ORDER BY g ASC, group_id ASC

 

这种场景,用集算器 SPL 更容易处理,只要很短一行:

=connect(”Hive”).query(“select * from A”).group(g;~.top(-3;x)).conj(#2)

 

* 怎么取出组内大于中位数的行?

* 组内出现过最大的上升幅度是多少?

* 哪些组出现过连续上升?

SPL 擅长解决这类分组子集和组内有序计算,比如《计算各组前 N 行》; 可以参考《组内运算》《行间计算》

 

当数据不在数据库里时,SPL 执行复杂计算仍然方便:
=file(“d:/t.csv”).import(;,",").group...

SPL能很方便地嵌入到JAVA应用,可参考《Java 如何调用 SPL 脚本》

具体使用方法可参考 《如何使用集算器》

 

一句话从 Hive 取每组前三名

标签:运算   from   blank   方法   函数   大于   imp   lan   不容易   

原文地址:https://www.cnblogs.com/xmilu/p/12919714.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!