如何在SSIS的ODBC源中用变量实现Netsuite到SQL Server增量同步

以下是适配Visual Studio 2022 + SSDT环境的具体变量映射步骤：

1. 准备变量

   • 创建一个包级变量（比如命名为User::LastExtractDateTime），数据类型选择与Netsuite中LastModifiedDate匹配的类型（通常是DateTime或String，根据实际字段类型调整）。
   • 初始值可设为早于目标表最早数据的日期（如1900-01-01），用于第一次全量抽取；后续通过前置执行SQL任务，从Azure SQL Server目标表读取最新的LastModifiedDate来更新这个变量。

2. 配置ODBC源的参数映射

   • 打开ODBC源编辑器，确认“数据访问模式”选择SQL命令，保留你编写的带参数的SQL语句：

     Select * 
     From Transaction 
     Where LastModifiedDate > ?;
     

   • 点击SQL命令输入框下方的参数按钮，弹出“查询参数”配置窗口。
   • 窗口中第一行的“参数名称”默认是Parameter0（对应SQL语句中的第一个?，多参数按顺序递增），在“变量名称”下拉菜单中选择你创建的User::LastExtractDateTime变量。
   • 检查“数据类型”列是否与Netsuite字段类型匹配，比如LastModifiedDate为datetime类型时，选择DT_DBTIMESTAMP即可，避免类型转换错误。

3. 验证与调试

   • 配置完成后运行包测试增量逻辑，确认仅抽取LastModifiedDate晚于变量值的数据。
   • 每次抽取完成后，记得更新LastExtractDateTime变量的值为本次抽取的最大LastModifiedDate（可通过执行SQL任务查询目标表并赋值），保证下次抽取的增量准确性。

内容的提问来源于stack exchange，提问作者Ajay Mahato