美文网首页
一句话从 Hive 取每组前三名

一句话从 Hive 取每组前三名

作者: 心宇gxy | 来源:发表于2020-07-02 10:06 被阅读0次

    Hive 实现这个用到了窗口函数,以及子查询,写出来也不容易,如下

    SELECT *

    FROM  (

    SELECT g, ROW_NUMBER() OVER(PARTITION BY g

    ORDER BY x) group_id RN FROM A

    )

    WHERE group_id <= 3

    ORDER BY g ASC, group_id ASC

    这种场景,用集算器 SPL 更容易处理,只要很短一行:

    =connect(”Hive”).query(“select * from A”).group(g;~.top(-3;x)).conj(#2)

    * 怎么取出组内大于中位数的行?

    * 组内出现过最大的上升幅度是多少?

    * 哪些组出现过连续上升?

    SPL 擅长解决这类分组子集和组内有序计算,比如《计算各组前 N 行》; 可以参考《组内运算》《行间计算》

    当数据不在数据库里时,SPL 执行复杂计算仍然方便:=file(“d:/t.csv”).import(;,",").group...

    SPL能很方便地嵌入到JAVA应用,可参考《Java 如何调用 SPL 脚本》

    具体使用方法可参考《如何使用集算器》

    相关文章

      网友评论

          本文标题:一句话从 Hive 取每组前三名

          本文链接:https://www.haomeiwen.com/subject/roelqktx.html