.NET构建时预解析CSV文件的最优实现方案咨询

我有一个包含13000行数据的翻译CSV文件，目前在应用启动时通过以下代码从清单资源读取：

var resourceStream = Assembly.GetExecutingAssembly().GetManifestResourceStream("filename.csv")

并使用CsvParser进行解析，该操作耗时约2秒，速度较慢。我希望能在构建时完成预解析，之后可通过如下方式直接访问数据：

var lines = SomeCode.ParsedLines;

我曾考虑生成如下格式的巨型.cs文件：

ParsedLines= new string[,]{{"title1","title2"},{"word1","word2"}}

但CSV文件会频繁修改，这种方式并不合适。我猜测可以创建代码生成器在每次构建时生成该.cs文件，但想了解是否有更优方案。

可行方案 #

1. 构建时代码生成器（适配性最强的方案） #

你提到的代码生成器思路其实完全适配你的场景，CSV频繁修改的问题可以通过绑定构建触发逻辑解决：

• 要么用.NET原生的源代码生成器（Source Generator），要么写一个简单的控制台工具，用来读取CSV文件并生成包含ParsedLines静态数组的.cs文件；
• 在项目的.csproj里添加MSBuild任务，指定每次构建前先运行这个工具，确保生成的代码始终和最新CSV同步。
• 优势：运行时直接访问静态数组，零解析开销，启动速度最快；CSV修改后只要重新构建就自动更新代码，完全不用手动维护。
• 规范的生成代码示例：

public static class TranslationData
{
    public static readonly string[,] ParsedLines = new string[,]
    {
        {"title1", "title2"},
        {"word1", "word2"},
        // 自动生成所有行数据
    };
}

2. 构建时预序列化二进制文件 #

如果不想生成巨型代码文件，可以在构建时把CSV解析后序列化为二进制格式（比如用MessagePack、Protobuf这类高效序列化库），再把二进制文件设为嵌入式资源：

• 同样用MSBuild任务在构建前执行脚本：解析CSV→序列化为二进制文件→标记为嵌入式资源；
• 启动时直接读取二进制资源并反序列化为内存对象，这个过程比解析CSV快得多（13000行的反序列化耗时通常在几十毫秒内）。
• 优势：避免生成大体积.cs文件，二进制文件比CSV更紧凑；CSV修改后构建时自动更新资源，无需手动操作。

3. 预生成JSON资源 #

和二进制序列化思路类似，构建时把CSV转换为JSON格式并嵌入为资源：

• 启动时用System.Text.Json这类高效JSON库反序列化，速度也远快于CSV解析；
• 优势：JSON文件可读，方便调试；同样支持构建时自动更新。

方案对比 #

• 代码生成器：运行时性能最优，无任何额外开销，但会生成较大的.cs文件（现代IDE和编译器完全能处理，不影响开发）；
• 二进制序列化：文件体积小，反序列化速度快，适合不想生成大量代码的场景；
• JSON序列化：可读性强，调试友好，性能略逊于二进制，但远优于CSV解析。

内容的提问来源于stack exchange，提问作者Grigoriy Zatravkin