从Azure Blob复制文件时，按Last Modified过滤功能失效

常见排查方向 #

• 时间时区/格式不匹配
  检查过滤规则的时间范围是否与文件Last Modified的时区一致。多数管道工具默认使用UTC时区，若本地文件时间为本地时区，会出现匹配偏差。比如你设置Last Modified > 2024-05-01T00:00:00，但文件实际UTC时间可能早于该节点，导致无法匹配。
• 规则语法错误
  确认规则表达式是否符合工具要求：比如部分工具要求时间必须为标准ISO格式，或运算符使用错误（如误写>为<，或需要用>=而非>）。对照未添加规则时的管道配置，检查规则字段的拼写、格式是否完全符合工具规范。
• 文件元数据读取异常
  部分存储系统（如FTP、对象存储）的文件Last Modified元数据可能存在延迟，或工具读取元数据时出现异常。尝试查看工具实际读取到的文件元数据，确认其Last Modified值是否与你看到的示例文件一致。
• 多规则优先级冲突
  检查是否有其他过滤规则（如文件名、文件大小过滤）与Last Modified规则同时生效，导致文件被其他规则排除。比如同时设置了文件名包含特定字符的规则，而示例文件不满足该条件，也会出现无文件匹配的结果。

快速验证步骤 #

1. 简化过滤规则：先设置一个宽泛的时间范围（如Last Modified > 2020-01-01），确认是否能检测到文件，再逐步缩小范围排查语法或范围问题。
2. 对比基础配置：对照未添加规则的管道配置，确认源路径、目标路径、权限等核心配置未被误修改。
3. 查看日志详情：直接查看管道的运行日志，寻找过滤规则匹配的相关记录（如“文件X的Last Modified为XXX，不符合规则”），定位具体失效原因。

内容的提问来源于stack exchange，提问作者Morten Knudsen