SQL Server每日同步作业：SSIS包每日刷新是否会造成目标服务器数据重复？

核心结论 #

默认配置下，你的SSIS包会导致服务器B的记录每日重复。因为ADO.NET源会全量读取服务器A的表数据，而默认的ADO.NET目标组件是直接执行INSERT操作，不会检查目标表中是否已存在相同记录，每日执行就会重复插入全量数据。

避免重复的解决方案 #

针对你的Lift and Shift迁移需求，推荐以下几种实现方式：

1. 先清空目标表再插入 #

• 在数据流任务前添加一个执行SQL任务，执行TRUNCATE TABLE [目标表名]或者DELETE FROM [目标表名]（注意TRUNCATE效率更高，但需要对应权限），确保每次执行前目标表是空的，再全量插入源表数据。
• 优点：实现简单，适合数据量不大的场景；
• 缺点：执行期间目标表会暂时无数据，如果有业务依赖目标表，可能影响可用性。

2. 实现增量同步（基于主键/时间戳） #

• 给源表添加更新时间戳字段（比如LastUpdated），或者利用已有主键字段；
• 修改ADO.NET源的查询语句，只读取上次同步后新增或修改的数据，例如：

  SELECT * FROM [源表名] WHERE LastUpdated > ?
  

  然后在SSIS中配置参数，记录每次同步的时间戳，下次执行时传入该参数；
• 目标组件使用**“插入或更新”逻辑**：可以通过两种方式实现
  • 方式一：在数据流中添加查找组件，匹配目标表的主键，将数据分流为“新增”和“更新”，分别执行INSERT和UPDATE操作；
  • 方式二：使用执行SQL任务执行MERGE语句，直接在数据库层面完成同步逻辑，效率更高。

3. 使用“替换表”策略 #

• 每次同步时，先将源表数据插入到目标服务器的一个临时表（比如[目标表名]_Temp）；
• 然后通过执行SQL任务，先删除原目标表，再将临时表重命名为目标表名，或者用SWITCH语句（如果是SQL Server）快速切换；
• 优点：目标表始终有数据，切换几乎无延迟，适合对可用性要求高的场景；
• 缺点：需要额外的存储空间存放临时表。

内容的提问来源于stack exchange，提问作者Abhishek pamulapati