一句话从 Hive 取每组前三名
Hive 实现这个用到了窗口函数,以及子查询,写出来也不容易,如下
SELECT *FROM (
SELECT g, ROW_NUMBER() OVER(PARTITION BY g
ORDER BY x) group_id RN FROM A
)
WHERE group_id <= 3
ORDER BY g ASC, group_id ASC
这种场景,用集算器 SPL 更容易处理,只要很短一行:
=connect(”Hive”).query(“select * from A”).group(g;~.top(-3;x)).conj(#2)
* 怎么取出组内大于中位数的行?
* 组内出现过最大的上升幅度是多少?
* 哪些组出现过连续上升?
SPL 擅长解决这类分组子集和组内有序计算,比如《计算各组前 N 行》; 可以参考《组内运算》、《行间计算》
当数据不在数据库里时,SPL 执行复杂计算仍然方便:
=file(“d:/t.csv”).import(;,",").group...
SPL能很方便地嵌入到JAVA应用,可参考《Java 如何调用 SPL 脚本》。
具体使用方法可参考 《如何使用集算器》。