You need to enable JavaScript to run this app.
优惠活动
大模型
产品
解决方案
定价
更多

使用PowerShell的Compare-Object处理CSV多重复项对比问题

解决思路

你的问题出在Compare-Object的工作逻辑上:它是逐行对比数据,而非基于title去重后对比。当CSV1中同一个title对应多条不同画质的记录时,Compare-Object只会将其中一条标记为与CSV2的匹配项(SideIndicator ==),剩下的同title记录都会被判定为「仅存在于CSV1」(SideIndicator <=),所以最终结果里会残留CSV2中已存在的title的其他记录。

下面提供两种可行的解决方案:

方法一:用哈希集快速过滤(性能优先)

先提取CSV2中所有唯一的title存入哈希集,再直接过滤CSV1中不在该集合内的记录:

# 导入CSV文件
$CSV1 = Import-Csv -Path "你的CSV1路径"
$CSV2 = Import-Csv -Path "你的CSV2路径"

# 提取CSV2的所有唯一title,存入哈希集(查找速度远快于数组)
$csv2TitleSet = [System.Collections.Generic.HashSet[string]]::new($CSV2.title)

# 筛选CSV1中title不在CSV2里的所有记录
$CSV1 | Where-Object { -not $csv2TitleSet.Contains($_.title) } | Select-Object title, quality

方法二:先找独有的title再筛选(逻辑贴近原命令)

先对两个CSV的title去重后对比,找出CSV1独有的title,再提取CSV1中这些title的所有记录:

# 导入CSV文件
$CSV1 = Import-Csv -Path "你的CSV1路径"
$CSV2 = Import-Csv -Path "你的CSV2路径"

# 对比去重后的title列表,找出仅在CSV1存在的title
$uniqueTitlesInCSV1 = Compare-Object `
    ($CSV1 | Select-Object title -Unique) `
    ($CSV2 | Select-Object title -Unique) `
    -Property title -PassThru | 
    Where-Object SideIndicator -eq '<=' | 
    Select-Object -ExpandProperty title

# 提取CSV1中对应title的所有记录
$CSV1 | Where-Object title -in $uniqueTitlesInCSV1 | Select-Object title, quality

内容的提问来源于stack exchange,提问作者ExitGame

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.08.25 14:24:19