Python subprocess与C程序交互阻塞及句柄异常问题求助

问题1：readline()阻塞的原因 #

• 管道缓冲问题：C程序的stdout默认是行缓冲或全缓冲模式，若输出未以换行结尾，数据会被滞留在C程序的缓冲区中，Python的readline()因等待换行符一直阻塞。
• 输入触发不足：如果C程序用scanf("%d")读取整数，该函数会持续等待输入直到遇到数字分隔符（空格、换行等）。若Python仅发送数字字节（如b"123"）而无分隔符，C程序会阻塞在scanf调用，导致Python后续读取输出时因无内容返回而阻塞。

问题2：with块导致文件关闭的原因 #

with语句会在代码块执行完毕后自动调用subprocess对象的清理逻辑，关闭stdin、stdout、stderr管道。后续尝试写入已关闭的stdin自然会抛出"文件已关闭"的错误。

符合要求的解决方案 #

以下是满足仅用内置库、无换行符、保持stdin打开、不修改C代码要求的交互脚本：

import subprocess

# 启动C程序，强制无缓冲，保持管道打开
proc = subprocess.Popen(
    ["stdbuf", "-o0", "./your_c_binary"],  # stdbuf强制C程序stdout无缓冲
    stdin=subprocess.PIPE,
    stdout=subprocess.PIPE,
    bufsize=0,  # Python端管道无缓冲
    close_fds=False
)

# 发送整数数据：用空格作为分隔符（替代换行，满足无换行要求）
proc.stdin.write(b"123 ")
proc.stdin.flush()  # 强制刷新缓冲区，确保数据立即传递给C程序

# 读取输出：若C程序输出固定长度的内容，用read(n)替代readline()
# 示例：假设C程序输出对应整数的字符串形式（如输入123输出"123"）
output = proc.stdout.read(3)
print(output.decode("utf-8"))

# 继续发送更多数据，stdin仍处于打开状态
proc.stdin.write(b"456 ")
proc.stdin.flush()
output = proc.stdout.read(3)
print(output.decode("utf-8"))

# 手动关闭管道并等待程序结束（按需执行）
proc.stdin.close()
proc.stdout.close()
proc.wait()

核心注意事项 #

1. 放弃with块：直接实例化Popen对象，手动控制管道的关闭时机，确保stdin在需要交互的全程保持打开。
2. 双端无缓冲：
   • 用stdbuf -o0强制C程序的stdout无缓冲（无需修改C代码），避免输出被滞留。
   • 设置bufsize=0让Python端的管道无缓冲，确保数据即时传递。
3. 输入分隔符选择：用空格替代换行作为scanf("%d")的触发分隔符，既满足"不能加换行符"的要求，又能让scanf完成读取并返回。
4. 读取逻辑适配：若C程序输出无换行，绝对不能用readline()，改用read(n)读取固定字节数，或根据输出的实际格式调整读取逻辑（比如循环读取直到有足够数据）。

内容的提问来源于stack exchange，提问作者ma4stro