完善SQLite执行参数字典——JSON数据导入数据库问题

嘿，你这个思路完全没问题——用SQLite的命名参数绑定字典，刚好适配这种扁平结构的JSON数据！我来给你把这个方案补得更完整，还能解决批量导入、避免硬编码这些实际场景里的问题：

先把你给出的代码补全，加上数据库连接、建表、提交等关键步骤：

import sqlite3
import json

# 1. 连接SQLite数据库（不存在则自动创建）
conn = sqlite3.connect('my_database.db')
c = conn.cursor()

# 2. 先确保表存在（如果还没创建的话）
c.execute('''CREATE TABLE IF NOT EXISTS my_table
             (id INTEGER PRIMARY KEY, field1 TEXT, field2 TEXT, field3 TEXT)''')

# 3. 从JSON文件读取数据（示例：假设JSON是单个对象或列表）
with open('your_data.json', 'r') as f:
    data = json.load(f)
    # 处理JSON是单个对象或列表的情况
    row_values = data if isinstance(data, dict) else data[0]

# 4. 执行你写的插入语句
sql = "INSERT INTO my_table (id, field1, field2, field3) VALUES (:id, :field1, :field2, :field3)"
c.execute(sql, row_values)

# 5. 提交更改并关闭连接
conn.commit()
conn.close()

如果JSON的字段很多，手动写列名太麻烦，可以动态提取字典的键来生成SQL，适配任意数量的匹配字段：

# 假设row_values是你的JSON字典
columns = ', '.join(row_values.keys())
# 生成对应的命名占位符
placeholders = ', '.join([f':{key}' for key in row_values.keys()])
sql = f"INSERT INTO my_table ({columns}) VALUES ({placeholders})"

# 执行插入
c.execute(sql, row_values)

这样只要JSON的键和数据库表的列名完全匹配，不管有多少字段都能自动适配，非常灵活。

如果你的JSON文件是一个字典列表（比如[{"id":1,...}, {"id":2,...}]），用executemany()比循环单条插入效率高得多：

with open('your_data.json', 'r') as f:
    data_list = json.load(f)  # 这里是列表格式的JSON数据

# 用第一条数据的键动态生成SQL
if data_list:
    columns = ', '.join(data_list[0].keys())
    placeholders = ', '.join([f':{key}' for key in data_list[0].keys()])
    sql = f"INSERT INTO my_table ({columns}) VALUES ({placeholders})"

    # 批量执行插入
    c.executemany(sql, data_list)
    conn.commit()

• 字段匹配：确保JSON的键和数据库表的列名完全一致（SQLite默认大小写不敏感，但保持一致能避免意外问题）。
• 数据类型：SQLite会自动做基础类型转换，但如果有特殊类型（比如日期），建议提前把JSON中的值转换成SQLite兼容的格式（比如字符串'2024-05-20'）。
• 异常处理：实际使用时建议加上异常捕获，避免插入失败导致程序崩溃：

try:
    c.executemany(sql, data_list)
    conn.commit()
except sqlite3.Error as e:
    print(f"插入数据出错: {e}")
    conn.rollback()  # 出错时回滚更改
finally:
    conn.close()  # 无论成功失败都关闭连接

内容的提问来源于stack exchange，提问作者mrgou