为何Go的文件读写效率远低于Perl？是代码问题还是其他原因？

核心问题分析 #

你的Go代码慢主要是代码写法+运行方式的问题，并非Go语言本身性能不足，具体原因如下：

1. go run的编译开销 #

go run每次执行都会先编译代码生成临时二进制再运行，这部分编译时间在小测试场景里占比极高。而Perl是解释型语言，直接执行脚本，没有编译步骤。

2. 无缓冲输出导致频繁系统调用 #

你的Go代码用fmt.Println直接输出每行内容，fmt.Println默认没有输出缓冲，每一行都会触发一次系统调用。而Perl的print默认带缓冲，会攒够一定数据才写入磁盘，大大减少系统调用次数——从耗时数据也能看出，Go的sys时间（0m2.038s）远高于Perl（0m0.049s），这就是频繁系统调用的典型表现。

3. 额外的不必要操作 #

Go代码里多了两个Perl没有的操作：

• strings.TrimSpace(line)：对每行做去空格处理，额外增加CPU开销
• 最后输出的File read ok!：会向输出文件额外写入一行内容

4. 文件打开模式冗余 #

用os.O_RDWR打开只读文件没必要，换成os.O_RDONLY更合理（对性能影响极小，但更规范）。

优化后的Go代码 #

package main

import (
    "bufio"
    "io"
    "os"
)

func main() {
    filepath := "./sample.csv"
    file, err := os.Open(filepath) // 只读打开文件
    if err != nil {
        panic(err)
    }
    defer file.Close()

    // 增大读缓冲（64KB），同时给输出添加缓冲
    reader := bufio.NewReaderSize(file, 64*1024)
    writer := bufio.NewWriterSize(os.Stdout, 64*1024)
    defer writer.Flush() // 程序结束前刷出缓冲内剩余数据

    for {
        line, err := reader.ReadString('\n')
        if err != nil {
            if err == io.EOF {
                // 处理最后一行可能无换行符的情况
                if len(line) > 0 {
                    writer.WriteString(line)
                }
                break
            }
            panic(err)
        }
        // 直接写入原行，不做额外处理
        writer.WriteString(line)
    }
}

优化后的测试步骤与耗时 #

1. 先编译Go代码（避免每次运行的编译开销）：

   go build -o read read.go
   

2. 运行编译后的二进制：

   time ./read > out.txt
   

   此时耗时会大幅降低，接近甚至超过Perl的执行速度。

补充说明 #

如果要和Perl的chomp;print "$_"完全对齐（去掉换行符后输出），可以把writer.WriteString(line)改成writer.WriteString(line[:len(line)-1])，但这会增加少量开销，依然远快于原代码。

内容的提问来源于stack exchange，提问作者qq.zhang