Hive中行列转换具体实现及应用

阿里云国内75折 回扣 微信号:monov8
阿里云国际,腾讯云国际,低至75折。AWS 93折 免费开户实名账号 代冲值 优惠多多 微信号:monov8 飞机:@monov6
Hive的行列转换

1、工作应用场景

统计得到每个小时的UV、PV、IP的个数,构建如下表结构:

 

 

 但是表中数据的存储格式不利于直接查询展示,需要进行调整:(以时间分区,去重、聚合等……对结果进行行列转换)

 

 

 

2、行转列

  (1)多行转多列

 

 case when函数

功能:用于实现对数据的判断,根据条件,不同的情况返回不同的结果,类似于java中的switch case功能

语法:

  语法一:

      CASE

      WHEN 条件1 THEN VALUE1

      ……

      WHEN 条件N THEN VALUEN

      ELSE 默认值 END

  语法二:

      CASE 列

      WHEN V1 THEN VALUE1

      ……

      WHEN VN THEN VALUEN

      ELSE 默认值 END

 

 

 

 

 

  (2)多行转单列

 

可以指定分隔符的字符串拼接函数:concat_wa只支持string、array[string]

 

 

 收集函数:

 

 

 

 

 

 

3、列转行

  (1)多列转多行

 

 

 

 

 

 

 

 

  (2)单列转多行

 

 

 

 

 

 lateral view 侧视图

 

阿里云国内75折 回扣 微信号:monov8
阿里云国际,腾讯云国际,低至75折。AWS 93折 免费开户实名账号 代冲值 优惠多多 微信号:monov8 飞机:@monov6