增量同步SQL Server时，源表删除记录后如何同步清理sink表？

方案1：源表逻辑删除+同步标记处理 #

• 给每个待同步的源表新增IsDeleted BIT类型字段，默认值为0；
• 将源表的物理删除操作改为逻辑删除：更新IsDeleted=1，同时更新LastUpdateTime（若已有该字段）；
• 调整pipeline的Copy Data活动：
  • 源端查询不仅筛选LastUpdateTime > @LastSyncTime，还要包含IsDeleted=1的记录；
  • 同步到目标表时添加分支逻辑：
    • 对IsDeleted=0的记录执行原有插入/更新逻辑；
    • 对IsDeleted=1的记录，根据主键在目标表执行删除操作；
• 定期清理：每周/每月在源表物理删除IsDeleted=1且超出保留周期的记录，避免源表数据膨胀。

优势：无需跨服务器关联查询，对sink服务器资源占用极低；逻辑简单易维护。
注意：需修改业务系统的删除逻辑，或通过源表触发器自动将物理删除转为逻辑删除（若无法修改业务代码）。

方案2：启用SQL Server变更数据捕获（CDC） #

• 在源数据库和待同步表上开启CDC功能：
  1. 启用数据库CDC：EXEC sys.sp_cdc_enable_db;
  2. 启用目标表CDC：EXEC sys.sp_cdc_enable_table @source_schema='dbo', @source_name='YourTableName', @role_name=NULL;
• 调整pipeline逻辑：
  • 用Lookup活动从CDC变更日志表（如cdc.dbo_YourTableName_CT）中，获取上次同步时间@LastSyncTime之后的所有变更记录；
  • 根据CDC记录的__$operation字段区分操作类型：
    • 1 = 删除操作：提取主键，在目标表执行批量删除；
    • 2 = 插入、4 = 更新：执行原有插入/更新逻辑；
• 同步完成后，更新同步日志为当前时间。

优势：无需修改业务逻辑或源表结构；CDC是SQL Server原生轻量级功能，对源服务器性能影响极小；能精准捕获所有增删改操作。
注意：需确保源SQL Server版本支持CDC（Enterprise版及以上，2016+ Standard版也支持）；需配置CDC的清理周期，避免变更日志过大。

方案3：主键分批对比优化（适用于无法修改源表/开启CDC的场景） #

• 步骤如下：
  1. 在源服务器创建临时表，分批拉取源表当前所有主键（例如按主键范围，每次拉取10万条）；
  2. 通过链接服务器配置源服务器到sink服务器的连接，在源服务器端执行对比：查询sink表中不在源主键集合内的记录主键；
  3. 将需要删除的主键列表分批传到sink服务器，执行批量删除（每次删除1万-5万条，避免锁表）；
  4. 对比完成后删除源端临时表。

优势：无需修改源表或业务逻辑；对比操作在源服务器执行，sink服务器仅做批量删除，资源占用极低；分批处理避免内存溢出。
注意：需配置链接服务器并确保权限；对比频率可设为每日一次（而非每次增量同步都执行），减少开销。

内容的提问来源于stack exchange，提问作者AntonyJ