在Hive/Impala中展开array<map<string,string>>类型字段的方法

针对你拥有的包含ID和arr_col（即Details列，类型为array<map<string,string>>）的数据表，以下是提取特定字段值的具体解决方法：

核心思路 #

1. 用explode()函数展开数组列，将数组中的每个map元素拆分为独立行
2. 通过map[key]的语法，从每个map中直接提取目标键对应的值

测试数据准备 #

先基于你提供的语句创建测试数据集（可直接作为子查询使用）：

WITH test_data AS (
    select stack(4,
                 115,array(map('AA_Desc', 'Sale', 'AA_Date', '202403', 'AA_Block', '0')),
                 214,array(map('AA_Desc', 'Ret', 'AA_Date', '202402', 'AA_Block', '1')),
                 54,array(map('AA_Desc', 'Sale', 'AA_Date', '202312', 'AA_Block', '0')),
                 31, array(map('AA_Desc', 'Can', 'AA_Date', '202312'), map('AA_Desc', 'Ret', 'AA_Date', '202312','AA_Block', '0'))
                ) as (id, arr_col)
)

方法1：拆分行提取每个map的字段值 #

如果需要将每个ID下的每个map元素拆分为单独行，并提取指定字段：

SELECT 
    id,
    map_item['AA_Desc'] AS aa_desc,
    map_item['AA_Date'] AS aa_date,
    map_item['AA_Block'] AS aa_block
FROM test_data
LATERAL VIEW explode(arr_col) exploded_table AS map_item;

执行后输出结果：

注：如果某个map中不存在目标键（如ID31的第一个map没有AA_Block），结果会返回NULL，可通过COALESCE(map_item['AA_Block'], '默认值')替换为指定内容。

方法2：聚合同一ID的所有map字段值 #

如果需要将同一个ID下的多个map字段值聚合为单个字符串：

SELECT 
    id,
    concat_ws('|', collect_list(map_item['AA_Desc'])) AS all_aa_desc,
    concat_ws('|', collect_list(map_item['AA_Date'])) AS all_aa_date,
    concat_ws('|', collect_list(COALESCE(map_item['AA_Block'], 'N/A'))) AS all_aa_block
FROM test_data
LATERAL VIEW explode(arr_col) exploded_table AS map_item
GROUP BY id;

执行后输出结果：

兼容性说明 #

以上语法在Hive和Impala中均可直接运行，两者对explode、LATERAL VIEW以及map取值的语法支持完全一致。

内容的提问来源于stack exchange，提问作者SAJ