如何用PowerShell读取Azure存储中CSV文件并提取指定列（无需本地存储）

核心思路 #

无需本地存储或Excel COM对象（自动化环境不支持该组件），直接用PowerShell原生命令解析CSV文本，完成指定列提取与文件名对比。

具体步骤与代码 #

1. 获取存储账户上下文
   优先使用自动化账户托管身份或连接资产认证，避免硬编码密钥：

# 方式1：使用自动化连接资产（AzureRunAsConnection）
$storageConn = Get-AutomationConnection -Name "AzureRunAsConnection"
$context = New-AzStorageContext -StorageAccountName "你的存储账户名" -ConnectionString $storageConn.ConnectionString

# 方式2：使用托管身份（推荐，无需密钥）
$context = New-AzStorageContext -StorageAccountName "你的存储账户名" -UseConnectedAccount

2. 提取CSV指定列数据
   通过DownloadText获取CSV文本，再用ConvertFrom-Csv解析为可操作的PowerShell对象，直接筛选目标列：

$sourceContainer = "源CSV所在容器名"
$csvBlobName = "目标CSV文件名.csv"

# 获取Blob并下载文本内容
$csvBlob = Get-AzStorageBlob -Container $sourceContainer -Blob $csvBlobName -Context $context
$csvRawText = $csvBlob.ICloudBlob.DownloadText()

# 解析CSV并提取所需列
$csvParsedData = $csvRawText | ConvertFrom-Csv | Select-Object TransferDate, DirectoryName, FileName, CreationDate

若CSV存在编码问题，可指定编码参数：

$csvRawText = $csvBlob.ICloudBlob.DownloadText([System.Text.Encoding]::UTF8)

3. 获取目标容器的文件名列表
   批量读取目标容器内所有Blob的文件名：

$targetContainer = "需对比的目标容器名"
$targetFileList = Get-AzStorageBlob -Container $targetContainer -Context $context | Select-Object -ExpandProperty Name

4. 执行文件名对比
   按需筛选差异项，比如找出CSV中有但目标容器缺失的文件：

$missingFiles = $csvParsedData | Where-Object { $targetFileList -notcontains $_.FileName }

# 输出对比结果
if ($missingFiles) {
    Write-Output "目标容器中缺失以下文件："
    $missingFiles | Format-Table FileName, TransferDate -AutoSize
} else {
    Write-Output "CSV中所有文件均已存在于目标容器"
}

方案优势 #

• 全程内存操作，无需本地存储，适配自动化环境限制
• 规避Excel COM对象的兼容性问题（自动化沙箱无Office组件，不支持桌面交互类操作）
• 纯PowerShell原生命令，性能稳定，无额外依赖

内容的提问来源于stack exchange，提问作者gaurav sharma