Celery Worker启动时控制台重复打印信息问题求助

• Prefork执行池的默认运行机制：Celery Worker默认采用prefork模式启动，流程是先启动主进程加载Celery应用模块，随后fork出子进程处理任务。主进程和子进程都会执行模块顶层的代码（比如你写的打印文件名、自动发现任务的循环），因此会出现重复输出。
• 模块级代码未做进程区分：你放在模块顶层的print(filename)和autodiscover_tasks调用属于模块初始化代码，没有判断当前是主进程还是子进程，只要模块被加载就会执行，而prefork模式下主、子进程都会加载一次模块，自然会重复执行。
• sys.path修改的潜在影响：units/__init__.py中修改了sys.path，可能导致模块导入路径发生变化，触发额外的导入逻辑，进一步加剧重复执行的情况。

简单解决思路 #

• 将需要只执行一次的初始化代码放到if __name__ == '__main__':块中，但注意Celery加载应用时不会触发这个代码块，若要在Worker启动时执行初始化，可改用Celery的信号机制，比如@celery_app.on_after_configure.connect装饰器绑定初始化函数。
• 通过进程ID判断，只在主进程中执行初始化逻辑，比如借助os.getpid()结合Celery提供的进程标识来区分主、子进程。

内容的提问来源于stack exchange，提问作者invalid