*链路类型

下拉选择来源和目标端数据源类型。

• 来源支持类型：MySQL、PostgreSQL、SQLServer、Oracle、VeDB、MongoDB、DataSail（内置Topic）、Kafka、BMQ
• 目标支持类型：DataSail（内置Topic）、LAS、Kafka、BMQ、Print、Hive

*方案名称

输入整库实时同步方案名称。只允许字母、数字、下划线、连字符，且仅允许输入 1~63 个字符。

方案描述

输入此方案的描述信息，方便后续维护管理。

*保存至

单击选择框，在弹窗中选择方案保存路径，此路径为数据开发项目中的任务路径。创建方式详见任务目录树管理。

*写入模式

当目标端为 LAS、Hive 数据源类型时，实时数据采集方案支持“实时写入日志表”模式，表示源端所有表的变更记录写入一张 log 表里，log 表由平台自动生成。您可将 log 表与准实时解决方案关联绑定，组合生成全增量表。

*数据来源

在数据来源框中，选择数据源管理中创建成功的数据源，支持选择多个。
若此前仍未创建相应数据源或需修改数据配置：

• 您可单击下方新建数据源按钮，在右侧弹窗的数据源管理界面，进行数据源的创建。
• 也可在对应数据源名称后，单击编辑按钮，进行数据源配置编辑操作。

具体数据源配置详见配置数据源。

*数据目标

下拉选择数据源管理中创建成功的目标端数据源名称。

*实时集成任务资源组

下拉选择 DataLeap 项目控制台中已绑定的独享数据集成资源组：

• 选择的资源组，需要确保能与源端、中间缓存数据源、目标端数据源连通，您可单击下方的测试连通性按钮，测试选择的资源组是否可以和各数据源连通成功。
  您可以将鼠标移动至测试连通性按钮上方，单击查看详情，可查看各数据源的连通性详情与测试结果信息。
  
• 您也可以单击资源组管理按钮，前往资源组管理界面进行资源组的查看或新建等操作，详见资源组管理。

*实时集成任务资源组

默认选择在网络与资源配置中选择好的独享数据集成资源组。您也可下拉选择已在 DataLeap 项目控制台中绑定的其他独享数据集成资源组。

*资源设置

实时任务的资源设置支持默认和自定义两种配置方式，可设定单 TaskManager CPU 数量、单 TaskManager 内存大小、JobManager CPU 数量等参数。
其中自定义方式设置时，平台会按固定比例协助您合理分配资源：例如，您选择 “单 TaskManager CPU 数” 或 “JobManager CPU 数” 后，平台会展示对应不同规格的内存大小供选择。

*镜像版本

全域数据集成产品版本更新速度相对较快，解决方案中的实时增量任务需配置流式镜像版本号，建议您下拉选择当前推荐标签的镜像版本号。

集成高级参数设置

打开高级参数输入按钮，根据实际业务要求，以 Key\Value 形式，在编辑框中输入实时任务所需的高级参数。支持参数详见高级参数。

Flink 运行参数设置

支持输入 Flink 相关的动态参数和执行参数，具体参数设置详见 Flink 官方文档。

*数据源

默认展示在网络与资源配置中选择的数据来源名称。

• 您也可单击下拉框中的新建数据源按钮，在右侧弹窗的数据源管理界面，进行数据源的创建。
• 也可在对应数据源名称后，单击编辑按钮，进行数据源配置编辑操作。

*订阅格式

下拉选择数据订阅格式，不同源端数据类型支持格式不同，您可根据实际情况进行选择。

*源库、源 Schema、源表/集合选择限定条件

您可通过设置源库、源 Schema、源表的限定条件，来获取源表信息。

• 单击添加规则按钮，完成限定条件规则的添加，支持添加多个规则，取合集；
  • 限定条件：您可通过指定源库、源表的名称来限定，也可通过正则表达式匹配的方式，快速获取源端库表信息。
  • 类型：依据限定条件中输入的条件，下拉选择匹配的类型，支持正则和个例类型配置。
• 源表限定条件，可支持批量输入，单击批量输入按钮，在弹窗中输入限定条件表达式，示例如下：[{"filterPattern":"table_name","filterType":"FULL","filterAction":"INCLUDE"}
  • filterType 可选：个例-FULL、正则-REG
  • filterAction 可选：INCLUDE

  注意

  当前批量输入的内容将会全量替换已手动添加的规则，请谨慎操作！

• 删除：您也可以单击操作列下的删除按钮，完成规则删除。

表/集合

单击获取源表/获取源集合按钮，平台根据源库、源表/集合限定条件的设置，自动加载符合条件的表/集合。

DML 配置

解决方案执行过程中，支持同步 DML 事件类型，支持插入、更新、删除事件类型。

源表和目标刷新配置

整库离线方案配置的源表和目标表数量较多时，您可设置单次拉取表数量，来分批进行表映射配置，默认单次拉取数量为 100 张表，您可根据实际情况进行调整，填写范围 1~2000。

高级参数配置

您可为同步解决方案配置全局的高级参数，打开开关按钮后，可通过以下方式配置：

• 单表编辑模式，需要设置参数 Key 和 value 值；
• 脚本编辑模式，需要输入 json 格式的参数。

如单表编辑模式，您可通过设置参数：storage_dialect_type=MYSQL，来设定 ByteHouse CDW 表为 MySQL 属性表。

逻辑表名

单击逻辑表名信息，可查看所选的源库表信息。

Topic/表建立方式

Topic/表建立方式分为使用已有表、自动建表和数据表不存在几种方式：

• 使用已有表：当映射配置检查，目标端存在与源端表同名的表名时，则会直接使用已有表，来执行方案。
• 自动建表：当映射配置检查，目标端不存在与源端表同名的表名时，将会通过任务，以定义的目标表名，自动创建目标表。
• 数据表不存在：当目标端无法通过 DataSail 自动建表时，您需要进入目标端数据库中，手动创建数据表后，再继续配置解决方案。

配置

您可为采集方案配置映射高级参数，以 key-value 的形式输入。
常用参数示例：

• Topic 分区数：solution.writer.common.topic.partition_num = 5
• Topic TTL 时间：solution.writer.common.topic.ttl = 7，单位天

执行详情

• 单击运维操作列的执行详情按钮，进入解决方案执行详情界面，查看方案的具体执行步骤，如目标表创建，采集流任务创建、发布、启动等一系列详情步骤。
  在具体步骤的右侧，您可单击单个步骤的执行详情按钮，您可进入查看各步骤中的任务操作状态、耗时及前往任务运维界面等操作。
• 单击云监控页签，前往查看采集方案的实时集成读写指标、CDC 监控指标信息、资源组使用率等监控信息。您可根据实际场景，自定义时间来查看方案相关的执行指标。

相关任务：
单击相关任务页签，可查看该方案下所有相关任务的执行情况；也可通过该界面，快速查看具体执行任务的日志详情。
实时数据采集解决方案可查看实时任务列表进行以下操作：

• 在操作列中单击详情按钮，跳转至实时任务运维界面的详情页中，查看任务基础信息、配置信息、运行监控、执行日志、操作日志等信息。详见4.2 任务详情。
• 在操作列中单击 Application Url 按钮，可进入查看 Flink 的 Web UI 执行日志详细信息。

云监控：
单击监控页签，前往查看解决方案的实时集成读写指标、CDC 延迟指标信息。您可根据实际场景，自定义时间来查看方案相关的执行指标。各指标说明详见实时任务监控指标及告警配置。

提交执行

未在启动中的任务，您可单击运维操作列的提交执行按钮，将任务提交到运行状态，开启实时数据采集任务的运行。

1. 方案调整后，第二次提交执行时，若任务之前的位点已不存在或想直接从最新位点开始执行时，则您需要在增量流任务位点重置步骤中，人工确认是否需要重置位点开关。重置时您可输入 Binlog 文件名、 Binlog 位点、gtids 等信息进行位点重置。
2. 在采集流任务启动的执行详情中，单击更多按钮，您可进行前往运维、查看操作日志、查看 Application Url 等操作。

方案查看

单击运维操作列更多中的方案查看按钮，可对当前采集方案的各个配置步骤进行查看。

方案编辑

单击运维操作列更多中的方案编辑按钮，可对当前采集方案的方案名称、数据来源端、目标端、运行配置步骤进行修改编辑。

方案复制

对已创建成功的采集方案任务，您可单击运维操作列更多中的方案复制按钮，对当前采集方案进行复制操作，生成一个新的采集方案。

修改责任人

单击运维操作列更多中的修改责任人按钮，在弹窗的下拉框中，选择对应的责任人，单击确定按钮，完成责任人修改操作。修改完成后，您也可前往下方的操作历史中查看修改记录。

方案解绑

解决方案提交后，在 DataLeap 数据开发界面均会生成相应的集成任务。
如果要在数据开发界面中对生成的集成任务进行编辑时，建议先进行解决方案的方案解绑操作，使解决方案界面中的任务处于已解绑（只读）状态。之后，集成任务的编辑、维护等操作需移步至数据开发界面进行，以确保两个界面中的同一任务配置一致。

运行监控

单击运维操作列更多中的运行监控按钮，为当前实时数据采集方案配置实时采集任务的运行监控。
在运行监控界面，单击新增规则按钮，平台自动为您创建一条监控规则，您可在操作列中，单击配置监控按钮，前往运维中心，查看监控详情。更多运行监控配置操作详见实时监控规则。

强制重启

单击运维操作列更多中的强制重启按钮，将之前创建的采集方案进行重启操作，区别于提交执行，强制重启会位点初始化、采集流任务停止等操作。

提交停止

单击运维操作列更多中的提交停止按钮，可将处于正常运行中的采集流任务进行停止操作。

操作历史

单击运维操作列更多中的操作历史按钮，您可查看当前同步方案的操作历史情况，如创建方案、重启方案、提交停止等操作，均会记录在操作历史中。您可单击操作列中的查看详情按钮，对历史版本的操作进行查看。