You need to enable JavaScript to run this app. Power Query处理含重叠时段的日期时间型时间序列方案咨询
优惠活动
大模型
产品
解决方案
定价
更多

Power Query处理含重叠时段的日期时间型时间序列方案咨询

你这个需求可以完全在Power Query中实现,不需要额外使用Python等工具。你当前的代码已经完成了多文件读取、字段合并和基础排序,只需要补充「按时间戳去重保留最新版本数据」的逻辑即可。

核心思路

因为你的多文件数据存在重叠,我们需要先保留文件的更新时间属性,判断同一个时间戳对应的哪条记录来自更新的文件,再做去重保留最新值即可。

修改后完整代码

let
    Source = Folder.Files("C:\Users\xxxx\OneDrive\Documents\Atom Projects\10MinOrtho\2. Orthometric\2021-06\10MinOrthos"),
    #"Filtered Hidden Files1" = Table.SelectRows(Source, each [Attributes]?[Hidden]? <> true),
    // 保留文件修改时间字段,用来判断文件新旧
    #"Keep Required Columns" = Table.SelectColumns(#"Filtered Hidden Files1", {"Content", "Name", "Date modified"}),
    #"Invoke Custom Function1" = Table.AddColumn(#"Keep Required Columns", "Transform File (2)", each #"Transform File (2)"([Content])),
    #"Renamed Columns1" = Table.RenameColumns(#"Invoke Custom Function1", {"Name", "Source.Name"}),
    #"Expanded Table Column1" = Table.ExpandTableColumn(#"Renamed Columns1", "Transform File (2)", Table.ColumnNames(#"Transform File (2)"(#"Sample File (2)"))),
    #"Changed Type" = Table.TransformColumnTypes(#"Expanded Table Column1",{{"Source.Name", type text}, {"Column1", type date}, {"Column2", type time}, {"Column3", type number}, {"Date modified", type datetime}}),
    // 合并日期和时间为完整时间戳
    #"Merged Date and Time" = Table.CombineColumns(#"Changed Type", {"Column1", "Column2"}, (columns) => List.First(columns) & List.Last(columns), "Merged"),
    // 先按时间戳升序,再按文件修改时间降序,保证同时间戳下最新文件的记录排在最前
    #"Sorted Rows" = Table.Sort(#"Merged Date and Time",{{"Merged", Order.Ascending}, {"Date modified", Order.Descending}}),
    // 按时间戳去重,只保留第一条(最新的)记录
    #"Remove Duplicate Timestamps" = Table.Distinct(#"Sorted Rows", {"Merged"}),
    // 可选:删除不需要的文件属性字段
    #"Clean Columns" = Table.RemoveColumns(#"Remove Duplicate Timestamps",{"Source.Name", "Date modified"})
in
    #"Clean Columns"

补充说明

  • 如果你是按文件名的时间规则判断版本优先级,不需要用系统的修改时间,可以把排序依据的Date modified换成从Source.Name中提取的版本时间字段即可
  • 如果你的重叠逻辑不是完全相同的时间戳,而是时间段重叠需要合并取最新覆盖,可以调整去重逻辑为按时间段分组后取最新记录,同样可以在Power Query中实现

内容的提问来源于stack exchange,提问作者ForeverLostAtSea

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.10.12 17:00:02