如何通过Azure DevOps Pipeline跨VM复制SQL数据库指定表

以下是几种可行的实现方案，按需选择：

1. PowerShell脚本 + BCP/Invoke-SqlCmd #

适合小到中等规模的表，操作简单直接：

• 编写PowerShell脚本，用bcp工具导出源表数据到临时文件，再导入到目标库；或者直接用Invoke-SqlCmd生成INSERT语句执行。
• 示例脚本（BCP方式）：

  # 导出源表数据到代理临时目录
  bcp "SELECT * FROM [SourceDB].[dbo].[TargetTable]" queryout "$(Agent.TempDirectory)\data.csv" -S "SourceVM\SQLEXPRESS" -U "SQLAccount" -P "SQLPassword" -c -t ","
  
  # 导入到目标表（若目标表未创建，需先执行CREATE TABLE语句同步结构）
  bcp "[TargetDB].[dbo].[TargetTable]" in "$(Agent.TempDirectory)\data.csv" -S "TargetVM\SQLEXPRESS" -U "SQLAccount" -P "SQLPassword" -c -t ","
  

• Pipeline配置：添加PowerShell@2任务，使用自托管代理（需能同时访问源/目标VM的SQL Server），运行上述脚本。

2. SSIS包 + Azure DevOps任务 #

适合需要数据转换、复杂业务逻辑的场景：

• 在SQL Server Data Tools (SSDT)中创建SSIS包，配置源/目标SQL连接，添加数据流任务，指定要复制的表（可配置字段映射、数据转换规则）。
• 将SSIS包部署到源/目标VM的SSIS目录，或使用Azure-SSIS Integration Runtime托管。
• Pipeline中调用dtexec命令执行SSIS包：

  dtexec /F "C:\SSISPackages\CopyTargetTable.dtsx" /Conn "SourceConn;Data Source=SourceVM;User ID=xxx;Password=xxx" /Conn "TargetConn;Data Source=TargetVM;User ID=xxx;Password=xxx"
  

3. Azure Data Factory (ADF) 复制活动 #

适合云原生、需监控/容错机制的场景：

• 在ADF中创建复制活动，源类型选择SQL Server（填入源VM的SQL连接信息），目标类型选择SQL Server（目标VM连接信息），勾选要复制的指定表。
• 在Azure DevOps Pipeline中添加AzurePowerShell@5任务，触发ADF管道运行：

  $resourceGroupName = "YourResourceGroup"
  $dataFactoryName = "YourADFName"
  $pipelineName = "CopyTablePipeline"
  Invoke-AzDataFactoryV2Pipeline -ResourceGroupName $resourceGroupName -DataFactoryName $dataFactoryName -PipelineName $pipelineName
  

4. SQL Server复制功能 #

适合需实时/定期自动同步的场景：

• 在源SQL Server上配置快照复制或事务复制，指定要同步的目标表，将目标SQL Server设为订阅服务器。
• 在Azure DevOps Pipeline中用PowerShell触发快照生成与同步：

  Invoke-SqlCmd -ServerInstance "SourceVM\SQLEXPRESS" -Query "EXEC sp_startpublication_snapshot @publication = 'YourPublicationName'" -Username "xxx" -Password "xxx"
  

• 注意：需提前配置好源/目标SQL Server的复制权限、快照共享目录权限。

内容的提问来源于stack exchange，提问作者Sushmitha shetty