MongoDB JSON数据上传问题：每5个数据点合并为字段但未遍历全部数据

你的代码只处理了前5个数据点，原因是固定取了data[:5]且仅执行一次插入操作。要遍历全部3170个数据点并生成634个MongoDB文档，需要按每5个数据点为一组循环处理，每组生成一个文档后插入数据库。

修改后的代码（单条插入） #

# 按步长5遍历所有数据点，每次处理一组
for i in range(0, len(data), 5):
    # 取出当前组的5个数据点
    current_batch = data[i:i+5]
    document = {}
    
    # 为当前组构建文档结构
    for key, data_point in zip(fields, current_batch):
        for sub_key, value in data_point.items():
            document[f"{key}_{sub_key}"] = value
    
    # 插入当前组的文档到MongoDB
    collection.insert_one(document)

优化版本（批量插入，效率更高） #

如果数据量较大，推荐使用批量插入减少数据库交互次数：

documents = []

# 遍历所有数据组，构建文档列表
for i in range(0, len(data), 5):
    current_batch = data[i:i+5]
    doc = {}
    
    for key, data_point in zip(fields, current_batch):
        for sub_key, value in data_point.items():
            doc[f"{key}_{sub_key}"] = value
    
    documents.append(doc)

# 批量插入所有文档
collection.insert_many(documents)

关键说明 #

• range(0, len(data), 5)：通过步长5的循环实现数据的分组遍历，确保覆盖全部3170个数据点
• data[i:i+5]：每次取出当前索引开始的5个数据点，替代原来固定的data[:5]
• 每个数据组对应一个独立的MongoDB文档，最终生成634个文档（3170 ÷ 5 = 634）

内容的提问来源于stack exchange，提问作者Kristi Zoto