Java 11下遍历超10万文件目录的高效内存友好方案咨询

你当前用folder.listFiles()的问题很明确：它会一次性把目录下所有文件的File对象全加载到内存里，10万+文件的话不仅内存占用会爆，还得等所有对象创建完才开始处理，自然慢得离谱。

Java 11里用NIO.2的流式API就能解决这个问题，它是懒加载的，遍历到哪个文件才处理哪个，不会一次性占满内存，效率也高很多，分两种场景给你方案：

仅遍历当前目录（不递归子目录） #

用Files.list()返回Stream<Path>，配合try-with-resources自动关闭流，避免资源泄漏：

try (Stream<Path> paths = Files.list(Paths.get("你的目录路径"))) {
    paths.forEach(path -> {
        // 先判断是不是文件（可选，根据你的需求调整）
        if (Files.isRegularFile(path)) {
            // 在这里写你的文件处理逻辑
        }
    });
} catch (IOException e) {
    e.printStackTrace();
}

递归遍历所有子目录 #

如果需要遍历子目录里的文件，用Files.walk()，默认会递归所有层级，也可以手动指定递归深度：

// 递归所有层级
try (Stream<Path> paths = Files.walk(Paths.get("你的目录路径"))) {
    paths.filter(Files::isRegularFile) // 过滤出文件，排除目录
         .forEach(path -> {
             // 你的文件处理逻辑
         });
} catch (IOException e) {
    e.printStackTrace();
}

// 只递归2层目录的写法
// try (Stream<Path> paths = Files.walk(Paths.get("你的目录路径"), 2)) {
//     // 处理逻辑同上
// }

额外优化建议 #

• 如果你的处理逻辑是CPU密集型的，可以改成并行流提升速度：paths.parallel().forEach(...)，但IO密集型任务（比如读写文件）并行提升有限，自己测了再用。
• 处理逻辑里别做太耗时的阻塞操作，保持流的遍历效率。

内容的提问来源于stack exchange，提问作者Aka