执行数据库查询超时，如何一次性获取全部大量数据？

• 优化查询与索引
  别用SELECT *，只查询实际需要的字段；检查查询语句中的过滤、排序字段是否建立了合适的索引。用EXPLAIN分析执行计划，若出现全表扫描（type: ALL），针对性给对应字段添加索引。开发环境数据量小，全表扫描也能快速完成，但生产环境数据量大时，索引缺失会直接导致查询超时。

• 调大超时参数
  数据库服务端和客户端连接都有超时限制，比如MySQL服务端的wait_timeout、interactive_timeout，JDBC客户端的connectTimeout、socketTimeout。根据预估的查询耗时，适当调大这些参数，避免连接在查询完成前被强制断开。

• 流式读取+本地缓存
  虽然要求一次性获取全量数据，但直接拉取可能触发内存溢出或超时。可以用数据库客户端的流式读取功能，比如JDBC中设置statement.setFetchSize(Integer.MIN_VALUE)，底层会分批传输数据到本地，你可以在代码中将这些分批数据缓存到内存，最后整合为完整的数据集。这种方式不是业务层面的分页，最终仍能拿到全部数据，同时降低单次请求的负载。

• 离线生成数据快照
  如果不需要实时数据，定时运行离线任务将全量数据导出为快照（比如存入临时表、Redis或本地文件），之后直接读取快照数据即可，无需每次都扫描原始大表。这种方式能彻底解决超时问题，适合固定查询逻辑的场景。

• 优化数据库服务器资源
  检查生产环境数据库的CPU、内存、磁盘IO是否存在瓶颈，比如磁盘读写速度慢会拖慢查询效率。可以临时提升服务器资源配置，或者清理磁盘碎片、优化表结构（比如MySQL的OPTIMIZE TABLE），提升服务器的处理能力。

内容的提问来源于stack exchange，提问作者Willian