存储约1万条媒体数据时，新增文件查数据库表还是存储更高效？

对于1万条图片数据的场景，数据库检查（给文件名加唯一索引）的效率远高于直接检查文件存储，具体原因如下：

• 数据库侧：给文件名字段添加唯一索引后，查询是否存在同名文件的操作是O(logn)复杂度的树查找，1万条数据量级下几乎是毫秒级完成。就算没加索引，全表扫描1万条数据的速度也比遍历文件目录快——数据库的存储是经过优化的内存+磁盘混合结构，查询时会优先命中缓存，远快于文件系统的目录遍历。

• 文件存储侧：如果所有文件都放在同一个目录下，1万文件的目录会让文件系统的查找性能急剧下降。多数文件系统（如ext4、NTFS）的目录条目存储结构并不适合大量文件共存，查找文件需要线性遍历目录，IO开销远大于数据库查询。就算采用分目录存储优化，文件系统的IO操作本质是磁盘随机读，还是不如数据库索引的内存缓存查询高效。

另外，数据库检查还有额外优势：可以通过唯一索引或事务保证原子性，避免并发上传时的竞态问题（比如两个请求同时上传同名文件，数据库会直接拦截，而文件系统检查可能出现“检查时不存在，写入时覆盖”的情况）。

内容的提问来源于stack exchange，提问作者panthro