Go语言中有无Python读取UTF-8文件替换错误字符功能的等价实现？

完全等价的实现是存在的，Go官方提供了对应的标准库和扩展库支持，以下是两种常用场景的实现：

场景1：一次性读取小文件到内存 #

Go 1.13及以上版本可以直接用标准库的strings.ToValidUTF8实现，不需要额外依赖：

package main

import (
	"os"
	"strings"
	"unicode/utf8"
)

func main() {
	contentBytes, err := os.ReadFile("your_file_path.txt")
	if err != nil {
		panic(err)
	}
	// 所有无效UTF-8序列会被替换为�，和Python errors='replace'行为完全一致
	content := strings.ToValidUTF8(string(contentBytes), string(utf8.RuneError))
    // 后续处理content即可
}

场景2：流式读取大文件（避免占用过多内存） #

使用Go官方扩展库x/text实现边读边替换，和Python的文件流读取行为一致：

1. 先安装依赖：go get golang.org/x/text
2. 示例代码：

package main

import (
	"io"
	"os"
	"unicode/utf8"

	"golang.org/x/text/encoding/unicode"
	"golang.org/x/text/transform"
)

func main() {
	file, err := os.Open("your_large_file_path.txt")
	if err != nil {
		panic(err)
	}
	defer file.Close()

	// 构造UTF-8解码器，设置编码错误时自动替换为�
	utf8Decoder := unicode.UTF8.NewDecoder().WithReplacement(utf8.RuneError)
	validUtf8Reader := transform.NewReader(file, utf8Decoder)

	// 后续可以像普通io.Reader一样读取validUtf8Reader，比如用bufio.Scanner逐行处理
	_, err = io.ReadAll(validUtf8Reader)
	if err != nil {
		panic(err)
	}
}

两种实现都会把所有不符合UTF-8规范的字节序列替换为标准的U+FFFD（�）替换字符，不会抛出编码异常，和你给出的Python代码行为完全一致。

内容的提问来源于stack exchange，提问作者Dnj Abc