寻求与SQL排序规则完全匹配的.NET字符串相等比较器

你遇到的核心问题是：.NET自带的排序比较逻辑（包括Microsoft.SqlServer.SqlManagementObjects中的CollationInfo比较器）并未完全复刻SQL Server Latin1_General_CI_AS排序规则的所有等价映射——比如SQL中ß和SS会被判定为相等，但默认的.NET比较器不会返回相同结果，导致代码中去重不彻底，触发数据库唯一约束。

以下是几种可行的解决方法：

1. 使用官方适配的SQL排序比较器（推荐） #

从.NET 6开始，Microsoft.Data.SqlClient包提供了SqlCollationComparer类，它专门用于匹配SQL Server的排序规则比较逻辑，能准确处理像ß与SS这类等价映射。

代码示例：

using Microsoft.Data.SqlClient;

// 创建对应排序规则的比较器
var sqlComparer = SqlCollationComparer.Create("Latin1_General_CI_AS");
// 此时会返回true，与SQL Server行为一致
bool isEqual = sqlComparer.Equals("ß", "SS");

用这个比较器在代码中做去重，就能和数据库的唯一约束判断逻辑完全对齐。

2. 让SQL Server直接处理重复判断 #

如果不想在代码中处理复杂的比较逻辑，可以把去重逻辑交给数据库：

• 导入时使用INSERT ... WHERE NOT EXISTS语句，结合排序规则判断是否存在等价记录：

  INSERT INTO YourTable (YourColumn)
  SELECT Value FROM @ImportList
  WHERE NOT EXISTS (
      SELECT 1 FROM YourTable 
      WHERE YourColumn COLLATE Latin1_General_CI_AS = Value COLLATE Latin1_General_CI_AS
  )
  

  这里可以用EF Core的FromSql或直接执行SQL命令，传入要导入的列表作为表值参数。
• 这种方式完全依赖数据库的排序规则判断，不会出现代码与数据库逻辑不一致的问题。

3. 手动模拟SQL的等价字符映射（适合简单场景） #

如果无法使用SqlCollationComparer，可以手动对字符串做规范化替换，把SQL中视为等价的字符统一转换：

• 比如将ß替换为SS，同时处理其他类似的等价字符（如æ→AE等），然后再做去重比较。
• 但这种方式需要维护SQL排序规则中的所有等价映射表，后续如果排序规则变更或有新的等价字符，需要同步更新，维护成本较高。

内容的提问来源于stack exchange，提问作者Oleg Oshkoderov