如何用PowerShell为2GB管道分隔文件前置表头且不生成第三方文件

原命令的问题 #

你直接尝试的 Get-Content inputFile1.txt, inputFile2.txt | Set-Content inputFile2.txt 会导致数据损坏或丢失：当Set-Content开始写入目标文件时，文件会被锁定，Get-Content无法完整读取原文件的内容，最终得到的文件可能只有表头，或者内容不完整。

最佳实现方案 #

因为文件系统本身不支持直接在文件开头插入内容（必须移动后续所有数据），所以最优方案是通过临时文件过渡，最终替换原文件，全程不会残留第三方文件。

方案一：PowerShell原生高效处理

适合大多数场景，用-Raw参数一次性读取内容，减少IO次数：

# 定义路径
$headerFile = "inputFile1.txt"
$dataFile = "inputFile2.txt"
# 生成同目录临时文件（避免跨磁盘拷贝开销）
$tempFile = Join-Path (Split-Path $dataFile -Parent) "temp_$(Get-Random).txt"

# 写入表头到临时文件，再追加原数据文件内容
Get-Content $headerFile -Raw | Set-Content $tempFile -Encoding UTF8
Get-Content $dataFile -Raw | Add-Content $tempFile -Encoding UTF8

# 替换原文件（原子操作，避免数据丢失）
Remove-Item $dataFile -Force
Rename-Item $tempFile $dataFile -Force

方案二：.NET流操作（针对超大文件优化）

如果2GB文件导致内存压力大，用流逐块处理，不加载整个文件到内存：

$headerFile = "inputFile1.txt"
$dataFile = "inputFile2.txt"
$tempFile = Join-Path (Split-Path $dataFile -Parent) "temp_$(Get-Random).txt"

# 读取表头内容
$headerContent = [System.IO.File]::ReadAllText($headerFile)

# 用流写入临时文件：先写表头，再逐块追加原文件内容
using ($streamWriter = [System.IO.StreamWriter]::new($tempFile, $false, [System.Text.Encoding]::UTF8)) {
    $streamWriter.Write($headerContent)
    using ($streamReader = [System.IO.StreamReader]::new($dataFile)) {
        $buffer = New-Object char[] 4096  # 4KB块大小，可根据内存调整
        while (($readLength = $streamReader.Read($buffer, 0, $buffer.Length)) -gt 0) {
            $streamWriter.Write($buffer, 0, $readLength)
        }
    }
}

# 替换原文件
Remove-Item $dataFile -Force
Rename-Item $tempFile $dataFile -Force

关键说明 #

不存在“直接编辑大文件开头”的更高效方式——文件系统的底层机制决定了，在文件开头插入内容必须移动后续所有数据，这和通过临时文件重新生成的开销是一致的。用临时文件替换的方式能保证数据安全，且操作原子性强，不会出现中间状态的数据损坏。

内容的提问来源于stack exchange，提问作者Seth