如何实现Python到PowerShell的对象流式传输 无需等待脚本全量执行

核心问题原因 #

你之前遇到的等待问题核心有两个：

1. Python默认开启输出缓冲，print的内容不会实时推送到管道，除非手动刷新缓冲区
2. 旧版本PowerShell的ConvertFrom-JSON默认不支持逐行解析行分隔的JSON对象，需要额外适配

最优方案：JSON Lines格式+原生PowerShell处理 #

无需引入jq等额外工具，兼容性和性能最优：

第一步：修改Python代码，开启实时输出 #

每行输出一个独立JSON对象，打印时强制刷新缓冲区：

from json import dumps
from time import sleep
from pathlib import Path

for fn in Path('.').glob('**/*'):
    # flush=True强制将输出立即推送到管道
    print(dumps({'name': str(fn)}), flush=True)
    sleep(0.1) # 模拟慢输出场景，验证流式效果

第二步：PowerShell端适配 #

• 如果你使用 PowerShell 7.3及以上版本：ConvertFrom-JSON原生支持流式解析行分隔JSON，直接执行即可实现实时处理：

  python .\dir_stream.py | ConvertFrom-Json
  

  可以加个中间步骤验证实时性，每收到一个对象就立即输出：

  python .\dir_stream.py | ConvertFrom-Json | ForEach-Object { "已处理：$($_.name)" }
  

• 如果你使用旧版本PowerShell（如Windows PowerShell 5.1）：自行逐行读取管道内容解析即可：

  python .\dir_stream.py | ForEach-Object { $_ | ConvertFrom-Json }
  

你之前使用jq无效的原因 #

你将Python输出改为完整JSON数组的操作反而导致jq需要等待整个数组接收完成才会开始解析。jq本身原生支持逐行处理行分隔JSON，不需要包成数组。如果一定要用jq，正确用法如下：

# 无需修改Python输出数组，直接处理每行JSON即可
python .\dir_stream.py | jq -c '.' | ConvertFrom-Json

内容的提问来源于stack exchange，提问作者Grismar