You need to enable JavaScript to run this app.
文档中心
大数据研发治理套件(私有化)

大数据研发治理套件(私有化)

复制全文
离线数据集成
MongoDB任务配置
复制全文
MongoDB任务配置

MongoDB数据源为您提供读取和写入MongoDB的双向通道数据集成能力,实现不同数据源与MongoDB之间进行数据传输。
下文为您介绍MongoDB数据同步的能力支持情况。

MongoDB数据源注册

您可在数据开发 > 数据源管理中进行配置注册,相关操作可参见“注册数据源”。

任务配置

任务新建完成后,进入任务配置页面,您可根据实际场景,配置MongoDB离线读MongoDB离线写等通道任务。

  1. 选择数据源

    • MongoDB离线读
      数据来源选择MongoDB,并完成以下相关参数配置:
      其中参数名称前带 * 的为必填参数,名称前未带 * 的为可选填参数。

      参数

      说明

      *数据源类型

      您可下拉选择或输入关键词进行搜索MongoDB数据源类型。

      *数据源名称

      已在数据源管理中注册成功的MongoDB数据源,下拉可选。 若还未建立相应数据源,可单击数据源管理按钮,前往创建MongoDB数据源。

      *集合名

      选择需要采集的数据集合名称,下拉可选。

      *主键名

      MongoDB中主键的明细信息。

    • MongoDB离线写
      数据目标端选择MongoDB,并完成以下相关参数配置:
      其中参数名称前带 * 的为必填参数,名称前未带 * 的为可选填参数。

      参数

      说明

      *目标类型

      数据去向目标类型,您可下拉选择或输入关键词MongoDB进行搜索。

      *数据源名称

      已在数据源管理界面注册的MongoDB数据源,下拉可选。 若还未建立相应数据源,可单击数据源管理按钮,前往创建MongoDB数据源。

      *集合名

      对应数据源下,选择需要写入数据的集合名称,下拉可选。

      *数据写入方式

      写入模式指定了传输数据时是否覆盖的信息:

      • 覆盖式写入:写入时,不清除数据,唯一键相同,用新的数据覆盖旧数据,唯一键不同时,直接插入新数据。
      • 直接写入:不做其他操作,直接写入数据,表示不覆盖。

      *业务主键

      当写入方式为覆盖写入时,需填写业务主键,支持配置多个业务主键,多个主键分隔符为逗号,配置形式为:a.b.c,a.d,k。

      写入前准备语句

      表示数据写入MongoDB前,对MongoDB中已有数据的前置操作,例如清理历史数据等,需确保输入语句符合JSON语法要求。

  2. 设置字段映射信息
    字段为一一映射关系,即将源表字段信息,同步到同一行的目标字段信息中。数据源在选择好来源和目标数据源信息后,您可通过转换模式基础模式方式来配置字段映射关系。操作详见“字段映射配置”。

  3. 高级参数
    您可选择是否开启高级参数设置,参数说明详见“高级参数设置”。

  4. 调度设置
    单击右侧侧边栏的调度设置,配置相关调度设置参数。调度设置说明详见“调度设置”。

  5. 任务调试
    参数配置完成后,可单击调试按钮 ,在弹出的窗口中,选择业务日期进行调试,调试结果/日志可在页面查看。

  6. 单击保存图标,完成草稿保存。

最近更新时间:2025.05.08 10:30:48
这个页面对您有帮助吗?
有用
有用
无用
无用