如何实现Salesforce到Azure SQL Database的自动增量同步及删除同步？

一、基于Azure Data Factory的优化方案（无需额外服务） #

1. 增量同步+触发器实现定时自动同步 #

• 放弃全量upsert，改用增量提取：利用Salesforce的LastModifiedDate或SystemModstamp字段作为筛选条件，每次仅同步上次同步时间之后新增/修改的数据，大幅减少处理的数据量，提升同步速度。
• 配置ADF时间触发器：根据业务需求设置触发间隔（比如15分钟、1小时），自动启动管道完成周期性同步。若追求更实时的效果，可缩短间隔，但需注意Salesforce的API调用配额限制。
• 处理删除操作：Salesforce删除的记录会进入回收站，可通过IsDeleted = true结合LastModifiedDate查询待删除数据，再在Azure SQL中执行对应删除逻辑。若需同步永久删除的记录，需启用Salesforce的数据删除事件跟踪功能。

2. 优化Upsert性能 #

• 调整批量大小：增大复制活动的批量值（比如Salesforce端设为1000-2000，Azure SQL端匹配对应批量），减少API调用次数。
• 启用并行复制：在复制活动设置中开启并行处理，设置合适的并行度（根据Salesforce API配额和Azure SQL性能调整，建议2-5），同时处理多批次数据。
• 引入暂存区：先将Salesforce数据复制到Azure Blob Storage暂存，再从Blob批量导入Azure SQL，比直接从Salesforce写入SQL的效率更高。

二、准实时同步方案（借助Azure事件类服务） #

如果需要秒级同步，可结合Salesforce事件机制与Azure服务实现：

• 在Salesforce中配置平台事件或推送Topic，当数据新增/删除时自动触发事件推送。
• 用Azure Logic Apps或Azure Functions接收Salesforce的事件通知，直接写入Azure SQL完成实时同步。
• 这种方式无需周期性轮询，仅在数据变化时触发操作，效率更高，但需额外配置Salesforce的事件推送规则和Azure的事件处理逻辑。

三、其他可选服务 #

• Azure Synapse Link for Salesforce：若已使用Synapse Analytics，可直接启用该链接，它能自动同步Salesforce数据到Synapse，原生支持增量和删除操作，性能优化到位，还可在Synapse中处理数据后同步到Azure SQL。
• Azure Data Sync：如果Azure SQL是云数据库，可配置Data Sync实现同步，但Salesforce端需满足数据源支持要求，配置灵活性略低于ADF。

内容的提问来源于stack exchange，提问作者Abhishek Chaudhary