C#从Box驱动器枚举超大量文件时遇OutOfMemoryException问题求助

当枚举包含2000多万文件的Box目录时，直接用Directory.EnumerateFiles后若一次性加载所有结果，必然触发内存溢出——光是2000万条文件路径字符串，内存占用就轻松超过2GB，再加上CLR的额外开销，内存肯定扛不住。

给你几个实用的解决办法：

• 逐个处理文件，不缓存全部结果：EnumerateFiles本身是延迟加载的，别把它转成List或数组，直接用foreach遍历，处理完一个文件就释放相关引用，不让内存堆积：

  foreach (var archivo in Directory.EnumerateFiles(directoriosEntrada[i], "*.*", SearchOption.AllDirectories))
  {
      // 在这里处理单个文件，比如记录路径、统计大小
      // 无需保留变量引用，让GC及时回收内存
  }
  

• 缩小搜索范围：如果不需要所有类型的文件，把*.*改成具体扩展名（比如.pdf），减少要枚举的文件数量，直接降低内存压力。

• 分批次处理（必须缓存时用）：如果需要批量操作，每次只存固定数量的文件路径，处理完一批就清空缓存：

  var enumerator = Directory.EnumerateFiles(directoriosEntrada[i], "*.*", SearchOption.AllDirectories).GetEnumerator();
  int batchSize = 1000; // 可根据内存情况调整批次大小
  List<string> batch = new List<string>(batchSize);
  
  while (enumerator.MoveNext())
  {
      batch.Add(enumerator.Current);
      if (batch.Count == batchSize)
      {
          ProcessBatch(batch);
          batch.Clear(); // 清空批次释放内存
      }
  }
  
  // 处理最后一批剩余的文件
  if (batch.Count > 0)
  {
      ProcessBatch(batch);
      batch.Clear();
  }
  
  // 自定义批次处理方法
  void ProcessBatch(List<string> files)
  {
      foreach (var file in files)
      {
          // 你的批量处理逻辑
      }
  }
  

• 清理额外内存占用：处理文件时，所有打开的流、资源都用using包裹，确保及时释放，避免额外内存泄漏。

• 用Box官方API替代本地枚举：如果是挂载的Box驱动器，直接用Box的官方API枚举文件更靠谱——API支持分页查询，能高效处理超大目录，还能避免本地文件系统枚举的各种性能和内存问题。

内容的提问来源于stack exchange，提问作者Bouchaib El asri