如何更快删除DataTable中标题不匹配或不包含指定文本的列？

你当前的需求是保留columnsToKeep列表中的列，以及列名包含"CF1"的列，移除其他列，但原实现处理100+列时耗时较长，下面分析问题并给出优化方案：

原代码 #

var columnsToKeep = new List<string>() { "Summary", "Status", "CF1" };
var toRemove = new List<DataColumn>();

foreach (DataColumn column in dtTable.Columns)
{
    if (!columnsToKeep.Any(name => column.ColumnName == name) && !columnsToKeep.Any(name => column.ColumnName.Contains("CF1")))
    {
        toRemove.Add(column);
    }
}

toRemove.ForEach(col => dtTable.Columns.Remove(col));

原代码的低效问题 #

1. 两次调用columnsToKeep.Any()，每次都要遍历整个列表，100列就会产生200次不必要的遍历
2. 第二个Any的逻辑错误：你实际要判断的是列名是否包含"CF1"，而非columnsToKeep里有没有包含"CF1"的项，这不仅逻辑错，还额外浪费了遍历开销
3. 逐个移除列时，DataTable会多次调整内部结构，增加性能消耗

优化方案 #

方案1：用HashSet加速精确匹配，修正判断逻辑

将columnsToKeep转为HashSet<string>，把精确匹配的时间复杂度从O(n)降到O(1)，同时修正判断逻辑：

var columnsToKeep = new HashSet<string>() { "Summary", "Status", "CF1" };
var toRemove = new List<DataColumn>();

foreach (DataColumn column in dtTable.Columns)
{
    // 精确匹配不在保留列表，且列名不含"CF1"，则标记移除
    if (!columnsToKeep.Contains(column.ColumnName) && !column.ColumnName.Contains("CF1"))
    {
        toRemove.Add(column);
    }
}

// 批量移除（遍历比ForEach更直观，性能差别不大）
foreach (var col in toRemove)
{
    dtTable.Columns.Remove(col);
}

方案2：反向创建新DataTable（适合行数较少的场景）

如果原表行数不多，直接创建新表保留需要的列，避免原表频繁调整结构的开销：

var columnsToKeep = new HashSet<string>() { "Summary", "Status", "CF1" };
DataTable newDt = new DataTable();

// 先添加需要保留的列
foreach (DataColumn column in dtTable.Columns)
{
    if (columnsToKeep.Contains(column.ColumnName) || column.ColumnName.Contains("CF1"))
    {
        newDt.Columns.Add(column.ColumnName, column.DataType);
    }
}

// 拷贝数据（如果原表有数据）
foreach (DataRow row in dtTable.Rows)
{
    DataRow newRow = newDt.NewRow();
    foreach (DataColumn col in newDt.Columns)
    {
        newRow[col.ColumnName] = row[col.ColumnName];
    }
    newDt.Rows.Add(newRow);
}

// 替换原表
dtTable = newDt;

方案3：从源头减少列数量（最优解）

如果这个DataTable是从数据库查询来的，直接在SQL语句里只查询需要的列（Summary, Status, CF1以及所有名称含CF1的列），从根本上避免后续的列移除操作，性能提升最明显。

内容的提问来源于stack exchange，提问作者lolikols