如何在Power BI中判断行唯一性并给重复组首行高效赋值1其余为0
Power Query 高效实现同组首行标记的解决方案
你当前使用的逐行索引对比方法性能差,是因为
{[Index]-1}属于逐行全表定位操作,时间复杂度为O(n²),9万行数据会产生上亿次无效遍历,自然运行缓慢。
最优解决方案:分组标记法(9万行数据耗时<5秒)
操作步骤:
- 步骤1:保留原始顺序,先给全表添加全局索引列,命名为
全局索引,起始值为0 - 步骤2:按
Employee ID列分组,分组操作选择「所有行」,生成分组子表列,命名为分组数据 - 步骤3:给每个分组子表添加组内序号列,起始值为1,公式如下:
= Table.AddColumn(#"上一步分组的步骤名", "带组内序号的数据", each Table.AddIndexColumn([分组数据], "组内序号", 1, 1, Int64.Type)) - 步骤4:扩展
带组内序号的数据列,恢复所有原始行 - 步骤5:添加1/0标记列,公式:
if [组内序号] = 1 then 1 else 0 - 步骤6:按
全局索引列排序,恢复数据原始顺序,删除不需要的辅助列即可
更简洁的轻量方案(适合10万行以内数据)
如果不需要保留原始排序,或者数据量不大,可以用列表匹配法,操作更简单:
- 步骤1:给全表添加全局索引
Index,起始值为0 - 步骤2:添加自定义列,公式:
= if List.PositionOf(#"添加索引后的步骤名"[Employee ID], [Employee ID]) = [Index] then 1 else 0
这个方法利用Power Query内置的列表批量匹配优化,不需要分组操作,代码量更少。
完整M代码参考(可直接套用)
let // 替换为你的数据源导入步骤 源 = Excel.CurrentWorkbook(){[Name="员工表"]}[Content], 调整数据类型 = Table.TransformColumnTypes(源,{{"Employee ID", type text}}), 添加全局索引 = Table.AddIndexColumn(调整数据类型, "全局索引", 0, 1, Int64.Type), 按员工ID分组 = Table.Group(添加全局索引, {"Employee ID"}, {{"分组数据", each _, type table [Employee ID=text, 全局索引=number]}}), 添加组内序号 = Table.AddColumn(按员工ID分组, "自定义", each Table.AddIndexColumn([分组数据], "组内序号", 1, 1, Int64.Type)), 扩展分组数据 = Table.ExpandTableColumn(添加组内序号, "自定义", {"全局索引", "组内序号"}, {"全局索引", "组内序号"}), 添加标记列 = Table.AddColumn(扩展分组数据, "1/0", each if [组内序号] = 1 then 1 else 0, Int64.Type), 恢复原始排序 = Table.Sort(添加标记列,{{"全局索引", Order.Ascending}}), 删除辅助列 = Table.RemoveColumns(恢复原始排序,{"全局索引", "组内序号"}) in 删除辅助列
内容的提问来源于stack exchange,提问作者Ronit Bhardwaj
相关产品推荐
相关产品推荐

