使用Power Automate从Azure文件共享读取内容并写入SQL表

以下几种方案可直接解决你的需求，重点针对列映射问题给出实操步骤：

方案1：Azure Data Factory（ADF）（推荐ETL场景） #

这是低代码、可视化的主流解决方案，能直观处理列映射：

• 配置数据源链接
  • 新建Azure文件系统链接服务，填入存储账户名、密钥，关联目标文件共享
  • 新建Azure SQL链接服务，通过连接字符串或身份验证方式关联目标SQL数据库
• 创建数据集
  • 源数据集：选择Azure文件共享类型，指定.csv文件路径，格式选DelimitedText，开启「首行作为标题」，设置对应分隔符（如逗号）
  • 目标数据集：选择Azure SQL表类型，指定目标表名（建议提前在SQL中创建好匹配的表结构）
• 处理列映射
  • 在管道中添加复制活动，关联源和目标数据集
  • 切换到「映射」标签，点击「导入架构」，分别导入源csv和目标SQL表的字段结构
    • 列名完全匹配时，直接启用自动映射即可
    • 列名不匹配时，手动拖拽源字段到对应目标字段；还可通过表达式做数据类型转换（比如将字符串转为日期：toDate(sourceColumn, 'yyyy-MM-dd')）
    • 无需写入的字段直接取消勾选，排除在同步范围外
• 测试运行：触发管道，查看运行日志确认数据写入状态

方案2：PowerShell脚本（适合自动化/批量场景） #

适合需要定时执行或批量处理文件的场景：

• 挂载Azure文件共享

  $storageAccountName = "你的存储账户名"
  $fileShareName = "你的文件共享名"
  $credential = New-Object System.Management.Automation.PSCredential "Azure\$storageAccountName", (ConvertTo-SecureString "你的存储账户密钥" -AsPlainText -Force)
  New-PSDrive -Name Z -PSProvider FileSystem -Root "\\$storageAccountName.file.core.windows.net\$fileShareName" -Credential $credential
  

• 读取并映射csv数据

  # 读取csv文件
  $csvData = Import-Csv -Path "Z:\目标文件.csv" -Delimiter ","
  
  # 列映射：修改列名匹配SQL表字段
  $mappedData = $csvData | Select-Object `
    @{Name="SQL列1"; Expression={$_."CSV列1"}}, `
    @{Name="SQL列2"; Expression={$_."CSV列2"}}, `
    @{Name="SQL列N"; Expression={$_."CSV列N"}}
  
  # 按需转换数据类型（示例：字符串转整数）
  $mappedData | ForEach-Object { $_."SQL列2" = [int]$_."SQL列2" }
  

• 写入SQL表

  # 首次运行需安装SqlServer模块
  Install-Module -Name SqlServer -Force -AllowClobber
  
  Write-SqlTableData `
    -ServerInstance "你的SQL服务器名.database.windows.net" `
    -DatabaseName "目标数据库名" `
    -TableName "目标表名" `
    -InputData $mappedData `
    -Force # 表不存在则自动创建，存在则追加数据
  

方案3：Azure Functions（适合复杂自定义逻辑） #

如果需要处理复杂数据清洗或特殊业务规则，可编写自定义代码：

• 用Azure文件共享触发器监听文件上传事件
• 用对应语言的库解析csv（C#用CsvHelper，Python用pandas）
• 在代码中手动处理列映射、数据转换（如空值填充、格式修正）
• 用SQL客户端库（C#用SqlClient，Python用pyodbc）执行批量插入，将数据写入SQL表

列映射常见问题解决 #

• 无表头或表头不匹配：ADF中可关闭「首行作为标题」，用索引映射（如源列0对应目标列ID）；PowerShell中用-Header参数指定自定义表头
• 数据类型不兼容：ADF中在映射面板调整字段数据类型；PowerShell中读取csv时用-Type参数指定类型，或写入前强制转换
• 部分字段无需写入：ADF中取消勾选对应字段；PowerShell中用Select-Object只保留需要的字段

内容的提问来源于stack exchange，提问作者luca canonico