如何将txt转换得到的数组对象插入到MongoDB数据库中

前置前提 #

MongoDB单次插入的最小单位为文档对象，如果你读取得到的是纯字符串数组（如["张三","李四"]），需要先转换为符合集合字段要求的对象数组，示例结构如下：

// 转换后的合法插入数组结构
const nameList = [
  { name: "张三" },
  { name: "李四" },
  { name: "王五" }
]

方式1：通过Mongo Shell直接插入 #

• 首先进入目标数据库

  use 你的数据库名
  

• 调用insertMany方法批量插入数组

  db.你的集合名.insertMany(你的数组变量名)
  

• 操作成功后会返回包含acknowledged: true以及所有插入文档_id的结果，代表插入完成。

方式2：Node.js环境（使用Mongoose） #

• 首先定义对应集合的Schema（只保留姓名字段即可）

  const mongoose = require('mongoose')
  const nameSchema = new mongoose.Schema({
    name: String
  })
  const NameModel = mongoose.model('Name', nameSchema, '你要插入的集合名')
  

• 调用insertMany方法批量插入

  // nameList为你从txt读取后转换好的对象数组
  NameModel.insertMany(nameList)
    .then(res => console.log('插入成功，共插入' + res.length + '条数据'))
    .catch(err => console.error('插入失败：', err))
  

方式3：Python环境（使用PyMongo） #

• 首先连接数据库获取集合对象

  from pymongo import MongoClient
  client = MongoClient('mongodb://localhost:27017/')
  db = client['你的数据库名']
  col = db['你的集合名']
  

• 调用insert_many方法插入数组

  # name_list为你从txt读取转换好的对象数组
  result = col.insert_many(name_list)
  # 打印插入的文档id确认结果
  print(result.inserted_ids)
  

注意事项 #

• 如果数组数据量超过10万条，建议拆分成分批插入，每次插入1万到2万条，避免单次请求过大导致报错
• 插入前可以先调用countDocuments方法查询集合原有数据量，插入后再次查询比对确认数据是否完整插入
• 如果需要忽略重复数据，可以在插入方法的配置项中设置ordered: false（不同语言参数写法略有差异）

内容的提问来源于stack exchange，提问作者Jenna Diop