Python场景下如何高效从MySQL多表获取单表最新记录？

问题1：你给出的UNION方案不正确 #

你当前的UNION语句逻辑是先合并两个表的所有数据，再整体按id降序取前2条，这无法保证每个表各返回一条最新记录。比如如果Name1表的最新几条记录的id都远大于Name2表的所有id，最终结果可能会返回两条Name1的记录，完全不符合“每个表取最新一条”的需求。

问题2：该方案在高写入场景下效率极低 #

1. 全表扫描开销：UNION会先读取两个表的所有数据，30+张表的情况下，数据量会随着时间快速增长（每秒写入），全表扫描的IO和内存开销会急剧上升，查询延迟会越来越高。
2. 全局排序开销：合并所有数据后再执行ORDER BY id DESC LIMIT 2，需要对海量数据进行排序，即使有索引，全局排序的成本也非常高，尤其是在数据持续写入的场景下，排序所需的临时表和磁盘IO会成为性能瓶颈。

正确且高效的实现方案 #

要同时满足“每个表取最新一条”和“单次查询减少延迟”的需求，应该先对每个表单独获取最新记录，再用UNION ALL合并结果：

(SELECT * FROM `Name1` ORDER BY id DESC LIMIT 1)
UNION ALL
(SELECT * FROM `Name2` ORDER BY id DESC LIMIT 1)
-- 后续30+张表以此类推

方案优势：

1. 逻辑正确：每个子查询都保证取到对应表的最新一条记录，UNION ALL直接合并结果，确保每个表贡献一条数据。
2. 性能高效：
   • 每个子查询利用id的主键索引（PRIMARY KEY (id)），可以快速定位到最新记录（主键索引是有序的，直接取最后一条，无需全表扫描），单表查询成本接近O(1)。
   • 使用UNION ALL而非UNION，避免了不必要的去重操作（各表的name唯一，不会有重复记录），进一步降低开销。
   • 整体查询的开销是线性的，即使扩展到30+张表，总开销也只是30次快速索引查询的总和，远低于全表扫描+全局排序的成本。
3. 高写入场景友好：InnoDB的快照读机制（默认隔离级别下）不会阻塞写入操作，同时这类基于主键的点查询也几乎不会被写入操作阻塞，能稳定应对每秒写入的场景。

与多语句查询的对比 #

你之前尝试的多语句查询（多个SELECT ... LIMIT 1用分号分隔）逻辑是正确的，但需要注意：

• 部分MySQL客户端驱动需要开启多语句支持（比如Python的mysql-connector需要设置multi=True），否则会报错。
• 单条UNION ALL查询的结果是一个统一的结果集，客户端处理起来更简洁，而多语句查询会返回多个结果集，需要额外处理。
• 两者的性能差异不大，但UNION ALL方案在代码维护和结果处理上更友好。

内容的提问来源于stack exchange，提问作者Volatil3