针对数百万文件的大目录场景，优先使用Windows原生高效工具，以下是从快到慢的优化方案：

一、最快方案：Robocopy + 命令行批处理 #

Robocopy是Windows内置的原生文件操作工具，底层调用系统文件API，遍历和筛选速度远超PowerShell，适合超大规模目录。

实现步骤 #

1. 计算昨日日期（格式为yyyyMMdd）
2. 用Robocopy列出符合修改时间条件的文件
3. 遍历结果执行自定义命令

@echo off
set "TARGET_DIR=D:\YourTargetDirectory"

REM 用PowerShell计算昨日日期（避免系统日期格式差异问题）
for /f %%d in ('powershell -Command "(Get-Date).AddDays(-1).ToString('yyyyMMdd')"') do set "CUTOFF_DATE=%%d"

REM Robocopy参数说明：
REM /L：仅列出文件不复制；/XO:%CUTOFF_DATE%：排除早于指定日期的文件；/S：遍历子目录
REM /FP：输出完整文件路径；/NS/NC/NFL/NDL：移除冗余统计信息
robocopy "%TARGET_DIR%" "%TARGET_DIR%" /L /XO:%CUTOFF_DATE% /FP /NS /NC /NFL /NDL /S ^
    | findstr /v "^\s*$" ^
    | findstr /v "Robocopy Started" ^
    | findstr /v "Ended" ^
    | findstr /v "Dirs : Files :" > temp_file_list.txt

REM 遍历文件列表执行自定义命令
for /f "delims=" %%f in (temp_file_list.txt) do (
    REM 替换为你的自定义命令，示例：打印文件路径
    echo 处理文件: %%f
    REM 示例：调用外部批处理脚本
    REM call "C:\YourCustomScript.bat" "%%f"
)

REM 清理临时文件
del temp_file_list.txt

二、PowerShell 高效优化版 #

如果偏好PowerShell，通过参数优化和流式处理可以大幅提升速度，避免一次性加载所有文件到内存。

优化脚本 #

# 定义目标目录和截止时间（昨日零点）
$targetDir = "D:\YourTargetDirectory"
$cutoffTime = (Get-Date).AddDays(-1).Date

# 核心优化点：
# - -File：仅遍历文件，跳过目录减少处理量
# - 流式管道：逐个处理文件，不占用大量内存
# - 提前计算截止时间，避免重复计算
Get-ChildItem -Path $targetDir -File -Recurse -Force |
    Where-Object { $_.LastWriteTime -ge $cutoffTime } |
    ForEach-Object {
        # 替换为你的自定义逻辑，示例：输出文件信息
        Write-Host "处理文件: $($_.FullName) | 修改时间: $($_.LastWriteTime)"
        # 示例：调用外部PowerShell脚本
        # & "C:\YourCustomScript.ps1" -FilePath $_.FullName
    }

极致优化：直接调用.NET API #

如果上述PowerShell脚本仍嫌慢，直接调用.NET的文件枚举方法，减少PowerShell对象包装的开销：

$targetDir = "D:\YourTargetDirectory"
$cutoffTime = (Get-Date).AddDays(-1).Date

# 使用Directory.EnumerateFiles流式枚举文件路径，内存占用极低
foreach ($filePath in [System.IO.Directory]::EnumerateFiles($targetDir, "*", [System.IO.SearchOption]::AllDirectories)) {
    # 直接获取文件修改时间，避免创建FileInfo对象
    $lastWriteTime = [System.IO.File]::GetLastWriteTime($filePath)
    if ($lastWriteTime -ge $cutoffTime) {
        # 自定义处理逻辑
        Write-Host "处理文件: $filePath"
        # & "C:\YourCustomScript.ps1" $filePath
    }
}

三、关键注意事项 #

• 权限：确保运行工具的账号拥有目标目录的遍历权限，否则会跳过无权限的子目录
• 隐藏/系统文件：需要包含这类文件时，PowerShell加-Force参数，Robocopy加/XA:SH（根据需求调整）
• 并行处理：如果自定义命令耗时较长，PowerShell中可使用ForEach-Object -Parallel（需PowerShell 7+），但注意控制并行数避免资源耗尽
• 日期格式：Robocopy的日期参数必须为yyyyMMdd，用PowerShell计算可避免系统日期格式差异问题

内容的提问来源于stack exchange，提问作者XXXXXX