美文网首页
大数据hive09-hivesql进行数据行转列

大数据hive09-hivesql进行数据行转列

作者: 数据蝉 | 来源:发表于2020-06-01 17:34 被阅读0次
一、需求背景
image.png

需要把星座和血型一样的人归类到一起,如下:


image.png
二、建表
create table dw.person_info(
name string, 
constellation string, 
blood_type string) 
row format delimited fields terminated by "\t";
三、插入数据
insert into dw.person_info(name,constellation,blood_type) values('孙悟空','白羊座','A');
insert into dw.person_info(name,constellation,blood_type) values('大海','射手座','A');
insert into dw.person_info(name,constellation,blood_type) values('宋宋','白羊座','B');
insert into dw.person_info(name,constellation,blood_type) values('猪八戒','白羊座','A');
insert into dw.person_info(name,constellation,blood_type) values('凤姐','射手座','A');
四、按需求查询数据
select
    t1.base,
    concat_ws('|', collect_set(t1.name)) name
from
    (select
        name,
        concat(constellation, ",", blood_type) base
    from
        person_info) t1
group by
    t1.base;
五、输出结果
image.png
六、总结

(1)CONCAT(string A/col, string B/col…):返回输入字符串连接后的结果,支持任意个输入字符串;

(2)CONCAT_WS(separator, str1, str2,...):它是一个特殊形式的 CONCAT()。第一个参数剩余参数间的分隔符。分隔符可以是与剩余参数一样的字符串。如果分隔符是 NULL,返回值也将为 NULL。这个函数会跳过分隔符参数后的任何NULL和空字符串。分隔符将被加到被连接的字符串之间;

(3)COLLECT_SET(col):函数只接受基本数据类型,它的主要作用是将某字段的值进行去重汇总,产生array类型字段。

相关文章

  • 大数据hive09-hivesql进行数据行转列

    一、需求背景 需要把星座和血型一样的人归类到一起,如下: 二、建表 三、插入数据 四、按需求查询数据 五、输出结果...

  • SqlServer 行转列

    1 建表,添加测试数据 表数据如下图: 行转列sql 行转列如下图: 2 建表,添加测试数据 表数据如下: 行转列...

  • mysql开发技巧笔记

    行转列 结果 使用 SUM 进行 行转列 列转行 应用场景 属性拆分 etl数据处理 1. 利用序列表处理列转行的...

  • SQL行转列-列转行

    SQL行转列-列转行 一、行转列 建表语句 插入数据 查询数据表中的内容(即转换前的结果) 先来看一下转换后的结果...

  • MySQL 行转列,列传行

    静态行转列 使用case...when....then 进行行转列 使用IF() 进行行转列 (1)SUM() 是...

  • 2018-09-04 浅谈数据库行转列

    在处理业务需求时,我遇到第二次数据库行转列,下面我用自己的语言总结下行转列的要点 SELECT* FROM (数据...

  • 前端 js 二维数据 行转列

    实现二维数据 行转列例如:从源数据转到目标数据 需要不同的数据结构时,只需要改变目标数据结构即可!

  • MYSQL 行转列,列转行的方法汇总

    一.行转列 1.准备数据 DROP TABLE IF EXISTS tbCREATE TABLE tb(`cnam...

  • Power Query 系列 (08) - 行转列案例

    行转列是一种常见的数据处理操作,所以对如何在 SQL 语句中、如何在 pandas 中实现这种行转列做过一些总结。...

  • SQLSERVER行转列和列转行

    1: 行转列 子查询,获取一定数据集结果 ``` SELECT objid,action,count(1) AS ...

网友评论

      本文标题:大数据hive09-hivesql进行数据行转列

      本文链接:https://www.haomeiwen.com/subject/mlmszhtx.html