用Python实现Bash多后台进程与重定向的等效功能

你不需要用到multiprocessing模块（它主要用于并行执行Python函数），针对启动外部命令的场景，subprocess模块是更合适的选择。以下是完全匹配你Bash脚本功能的Python实现：

核心思路 #

1. 用subprocess.Popen逐个启动所有外部命令（该方法不会阻塞，能实现近乎同时启动）
2. 保存每个进程的对象引用
3. 遍历所有进程对象，等待它们全部执行完成
4. 执行后续操作

完整代码示例 #

import subprocess
import sys

# 定义命令集合：每个元素是(命令参数列表, 输出文件名)
commands = [
    (["command1", "argument1a", "arg1b"], "output1"),
    (["command2", "argument2a", "arg2b"], "output2"),
    (["command3", "argument3a", "arg3b"], "output3"),
]

# 批量启动进程
running_processes = []
for cmd_args, output_path in commands:
    # 打开输出文件，启动进程
    with open(output_path, "w") as output_file:
        process = subprocess.Popen(
            cmd_args,
            stdout=output_file,       # 标准输出写入指定文件，对应Bash的> output
            stdin=subprocess.DEVNULL, # 标准输入从/dev/null读取，对应Bash的< /dev/null
            stderr=sys.stderr,        # 标准错误输出到终端，和Bash行为一致
            text=True                 # 文本模式处理输出，若需字节模式可删除此参数
        )
        running_processes.append(process)

# 等待所有进程执行完毕
for proc in running_processes:
    proc.wait()

# 执行后续操作
def do_something_else():
    print("所有并行任务完成，开始执行后续操作")

do_something_else()

针对需求的细节说明 #

• 支持不同命令/同一命令实例：只需在commands列表中添加对应条目即可，每个命令的输出文件独立设置
• 无输入需求：通过stdin=subprocess.DEVNULL实现，完全匹配Bash中< /dev/null的行为
• stderr输出：示例中直接输出到终端；若需写入单独文件，可将stderr=sys.stderr替换为stderr=open("error_log.txt", "w")
• 近乎同时启动：Popen调用会立即返回，循环启动所有进程的耗时极短，能满足并行启动的要求

额外扩展 #

如果需要获取进程的返回码，可在proc.wait()后通过proc.returncode查看；若要捕获进程输出而非写入文件，可将stdout设为subprocess.PIPE后调用proc.communicate()。

内容的提问来源于stack exchange，提问作者ljwobker