如何在Python中无需落盘直接查询内存中已下载的SQLite数据库？

方案1：Python 3.11+ 标准库实现（最优选择） #

Python 3.11及以上版本的标准库sqlite3模块原生提供deserialize方法，可直接将内存中存储SQLite数据库的bytes实例加载到内存数据库，全程无磁盘IO：

import sqlite3
import requests

# 示例：从远程接口下载SQLite数据库，直接获取字节内容无需存盘
resp = requests.get("https://example.com/target.db")
db_content = resp.content

# 打开内存数据库，直接用字节内容填充
conn = sqlite3.connect(":memory:")
conn.deserialize(db_content)

# 后续可正常执行SQL查询
cur = conn.cursor()
cur.execute("SELECT name FROM sqlite_master WHERE type='table'")
print(cur.fetchall())

conn.close()

方案2：Python 3.10及更低版本兼容方案 #

如果你的Python版本低于3.11，没有原生deserialize方法可用，可使用第三方SQLite封装库apsw实现同等效果，无需写磁盘：

1. 先安装依赖：
   pip install apsw
2. 代码示例：

import apsw
import requests

resp = requests.get("https://example.com/target.db")
db_content = resp.content

conn = apsw.Connection(":memory:")
conn.deserialize("main", db_content)

# 正常执行查询即可
cur = conn.cursor()
for row in cur.execute("SELECT * FROM your_table"):
    print(row)

conn.close()

两种方案全程所有数据仅在内存中流转，完全避免了多余的磁盘写入读取操作，符合你的需求。

内容的提问来源于stack exchange，提问作者Michal Charemza