Python异步代码执行顺序异常求助：依赖型任务无法按序完成

问题背景 #

• 基于Python asyncio开发异步网络爬虫，已用async/await实现异步抓取函数
• 使用asyncio.gather()并发执行多网站抓取任务，用asyncio.sleep()模拟网络延迟
• 因网站数据存在依赖关系，需要任务按输入顺序串行完成，但实际输出顺序混乱，不符合预期

核心原因 #

asyncio.gather()的设计目标是并发执行任务，事件循环会自动调度多个协程交替运行，任务的完成顺序完全由调度机制决定，无法保证和输入顺序一致——这不是bug，是并发特性的正常表现。

解决思路与代码示例 #

根据你的依赖需求，提供两种针对性方案：

方案1：完全串行执行（满足强依赖要求） #

如果必须等前一个网站抓取完成后再启动下一个，直接循环await每个协程即可，不需要用gather：

import asyncio

async def fetch_data(url):
    await asyncio.sleep(2)
    print(f"Data fetched from {url}")

async def main():
    websites = ["site1.com", "site2.com", "site3.com"]
    # 逐个执行，确保前一个完成后再启动下一个
    for url in websites:
        await fetch_data(url)

if __name__ == "__main__":
    asyncio.run(main())

此代码会严格按照site1.com→site2.com→site3.com的顺序输出，完全满足串行依赖要求。

方案2：并发执行+按输入顺序输出结果 #

如果只是需要最终结果按输入顺序处理，不要求执行过程串行，可以用gather收集结果后再按顺序打印：

import asyncio

async def fetch_data(url):
    await asyncio.sleep(2)
    return f"Data fetched from {url}"

async def main():
    websites = ["site1.com", "site2.com", "site3.com"]
    tasks = [fetch_data(url) for url in websites]
    # gather会按任务传入顺序返回结果，不受实际完成顺序影响
    results = await asyncio.gather(*tasks)
    for result in results:
        print(result)

if __name__ == "__main__":
    asyncio.run(main())

此方案中任务是并发执行的（总耗时约2秒），但最终输出会严格遵循输入顺序，适合仅对结果顺序有要求的场景。

额外提示 #

• 如果依赖关系更复杂（比如B网站的抓取需要用到A网站的结果），必须使用方案1的串行方式，或者在协程内部处理依赖逻辑
• 默认事件循环配置不会影响执行顺序，无需额外调整调度策略

内容的提问来源于stack exchange，提问作者Olegsfafaf