hive sql行转列，列转行sql的实例

在 Hive SQL 中，行转列和列转行是常见的数据转换操作。以下是详细说明和示例：

一、行转列（多行转多列）

场景：将同一分组下的多行数据合并为单行，不同值转为新列（如学生各科成绩横向展示）。

数据示例(student_scores)：

目标（每个学生一行，科目成绩转为列）：

SQL 实现：

SELECT student_id, MAX(CASE WHEN subject = 'Math' THEN score END) AS Math, MAX(CASE WHEN subject = 'English' THEN score END) AS English FROM student_scores GROUP BY student_id;

关键点：

1. 使用CASE WHEN按条件生成新列
2. 用聚合函数（如MAX/MIN/SUM）确保单行输出
3. 必须配合GROUP BY分组字段

二、列转行（多列转多行）

场景：将单行的多列数据拆分为多行（如将横向科目成绩转为纵向记录）。

数据示例(student_scores_wide)：

目标（恢复为行式存储）：

SQL 实现：

SELECT student_id, 'Math' AS subject, Math AS score FROM student_scores_wide UNION ALL SELECT student_id, 'English' AS subject, English AS score FROM student_scores_wide;

优化方案（使用LATERAL VIEW explode()，Hive 特有）：

SELECT student_id, subject, score FROM student_scores_wide LATERAL VIEW explode( map( -- 构建科目-分数的键值对 'Math', Math, 'English', English ) ) subjects AS subject, score;

关键点：

1. UNION ALL适合列数量固定的场景
2. LATERAL VIEW + explode(map)动态处理多列
3. 注意处理NULL值（Hive 中NULL会正常保留）

三、高级用法：动态行列转换

当列名不固定时（如新增科目），需结合 Hive 动态 SQL 或预处理：

1. 行转列动态化：
   使用collect_list+ 拼接字符串，再通过 UDF 解析（较复杂，通常需借助外部脚本生成 SQL）。
2. 列转行动态化：
   通过 Hive 元数据获取列名，动态生成UNION ALL语句（示例略，需依赖 Hive 变量或编程接口）。

总结对比

提示：Hive 3.0+ 支持LATERAL VIEW inline(array_of_structs)，但需先构造结构体数组。实际使用时请根据数据规模和复杂度选择合适方案。