APACHE PIG报错Projected field [Units_Sold]不存在 如何按商品品类求总销量
Pig Latin品类销量统计报错修复方案
错误根因
执行GROUP D2 BY Item_Type后,生成的D3的schema仅包含两个顶层字段:
group:即分组维度Item_Type的值D2:每个分组对应的所有D2记录组成的bag,Units_Sold字段嵌套在该bag的tuple内部
你直接调用SUM(Units_Sold)时,Pig无法在D3的顶层字段中找到Units_Sold,因此抛出字段不存在的报错。
修复方法
修改D4的计算逻辑,聚合时明确指定Units_Sold所属的bag名即可:
D4 = FOREACH D3 GENERATE group AS Item_Type, SUM(D2.Units_Sold) AS total_sold;
如果需要直接得到总销量最高的品类,可以额外增加排序和取数逻辑:
-- 按总销量倒序排序 D5 = ORDER D4 BY total_sold DESC; -- 取第一条即为总销量最高的品类 D6 = LIMIT D5 1; DUMP D6;
辅助排查手段
如果后续遇到类似字段引用错误,可以先执行DESCRIBE 关系名;查看对应关系的schema结构,确认字段的嵌套层级和所属关系,快速定位引用错误。
内容的提问来源于stack exchange,提问作者Liam Megonigal
相关产品推荐
相关产品推荐

