UTF-8转ASCII：单TXT文件转换脚本无效问题排查

问题根源 #

你的脚本没生效主要有两个核心原因：

• Get-Content默认编码不匹配：在PowerShell 5.1及更早版本中，Get-Content读取无BOM的UTF-8文件时，会默认使用系统的ANSI编码解码内容。这导致UTF-8文件先被错误解析，后续再输出ASCII自然无法得到正确的编码转换结果。
• 管道传输丢失原始字节信息：Get-Content会把文件内容转换成字符串再通过管道传递，这个过程中原始UTF-8字节已经被解码，Out-File只能基于错误解码后的字符串写入ASCII，而非直接转换原始UTF-8字节。

修复方案 #

方案1：指定Get-Content的UTF-8编码

直接在读取文件时明确指定编码为UTF-8，确保解码正确后再输出：

Get-Content -Path "File/Path/to/file.txt" -Encoding UTF8 | Out-File -FilePath "File/Path/to/processed.txt" -Encoding ASCII

方案2：直接处理字节流（更可靠）

跳过PowerShell的默认编码干扰，直接操作文件字节：

# 读取UTF-8字节→解码为字符串→转ASCII字节→写入文件
$utf8Bytes = [System.IO.File]::ReadAllBytes("File/Path/to/file.txt")
$utf8String = [System.Text.Encoding]::UTF8.GetString($utf8Bytes)
$asciiBytes = [System.Text.Encoding]::ASCII.GetBytes($utf8String)
[System.IO.File]::WriteAllBytes("File/Path/to/processed.txt", $asciiBytes)

注意事项 #

ASCII编码仅支持0-127范围内的字符，UTF-8文件中的非ASCII字符（如中文、特殊符号）会被自动替换为问号?，这是ASCII编码的固有限制，属于正常现象。

内容的提问来源于stack exchange，提问作者Crimp