什么因素决定Packer是否对标准输出stdout做行缓冲刷新？

核心机制说明 #

Go编写的程序（包括Packer）默认遵循类UNIX系统的标准I/O缓冲规则：

• 当stdout关联的是终端（tty/pty）设备时，stdout默认为行缓冲模式，每输出一行内容就会自动刷新缓冲区
• 当stdout关联的是管道、普通文件等非终端设备时，stdout默认为全缓冲模式，只有缓冲区写满（默认大小通常为4KB）或者进程退出时才会一次性刷新所有缓冲区内容

你观察到的触发差异和Python调用方式直接相关：当你调用Popen时如果使用默认的stdout=PIPE，传递给Packer的stdout是管道设备，Packer默认启用全缓冲，就会出现进程结束才一次性返回所有输出的情况；如果你的调用链路中给Packer分配了伪终端（pty），Packer检测到stdout是终端设备，就会启用行缓冲逐行输出，你的回调函数就会被频繁触发。

可行解决方案 #

你可以通过以下任意一种方式强制Packer逐行刷新stdout缓冲区：

• 调用时使用stdbuf工具强制修改Packer的stdout缓冲模式为行缓冲，修改你的Popen调用参数为：

  proc = Popen(['stdbuf', '-oL', 'packer', 'build', '.'], stdout=PIPE, encoding='utf8')
  

  其中-oL参数表示将标准输出设置为行缓冲模式，该工具为类UNIX系统默认自带工具，无需额外安装。
• 在Python侧使用伪终端（pty）调用Packer，让Packer认为自己运行在终端环境中，自动启用行缓冲：可以使用pty标准库或者第三方pexpect库实现，示例如下：

  import pexpect
  proc = pexpect.spawn('packer build .', encoding='utf8')
  for o in proc:
      do_stuff_with(o)
  

• 配置Packer的日志输出模式，设置环境变量PACKER_LOG=1开启详细日志模式，该模式下Packer会禁用stdout缓冲，直接输出所有日志内容：

  import os
  env = os.environ.copy()
  env['PACKER_LOG'] = '1'
  proc = Popen(['packer', 'build', '.'], stdout=PIPE, encoding='utf8', env=env)
  

Go底层实现补充 #

即使你没有找到Packer底层的fmt.Printf调用也不影响结论：Go标准库的os.Stdout默认就会自动判断输出目标是否为终端，进而选择对应的缓冲策略，上层打印接口无论封装多少层，只要最终输出到os.Stdout就会遵循该逻辑。

内容的提问来源于stack exchange，提问作者dspeyer