如何将Celery周期任务注册到Django Admin实现调度管理
Django+Celery周期后台任务开发问题说明
背景说明
基于Django与Celery开发周期后台任务功能时,所有自定义任务均可正常执行:通过命令celery -A parifex worker -B -l info启动集成Beat调度的Celery Worker时,可顺利加载识别到所有自定义任务。但原配置中针对INSTALLED_APPS设置的任务自动发现机制未按预期生效,因此在Celery实例化阶段手动指定了需要扫描任务的应用路径。
环境依赖
pip freeze |grep "celery\|Django" celery==4.4.1 Django==3.1.2 django-celery==3.3.1
核心配置
项目主配置目录
celery.py
from __future__ import absolute_import, unicode_literals import os from celery import Celery from django.conf import settings # 为celery程序设置默认的Django配置模块 os.environ.setdefault('DJANGO_SETTINGS_MODULE', 'parifex.settings') # 定义Celery配置,手动引入需要扫描任务的应用路径 app = Celery('parifex', include=['device.tasks']) # 此处使用字符串配置,可避免Windows环境下worker需要序列化对象的问题 app.config_from_object('django.conf:settings', namespace='CELERY') app.autodiscover_tasks(lambda: settings.INSTALLED_APPS, force=True) @app.task(bind=True) def debug_task(self): print(f'Request: {self.request!r}')
settings.py
djcelery.setup_loader() CELERYD_HIJACK_ROOT_LOGGER = False # Celery配置参考:标准参数配置说明 CELERY_REDIRECT_STDOUTS = True # 默认值 CELERY_REDIRECT_STDOUTS_LEVEL = 'DEBUG' CELERY_BROKER_URL = 'redis://:Redi$DB_withCelery@127.0.0.1:6234' # 使用数据库存储调度配置 CELERYBEAT_SCHEDULER = 'djcelery.schedulers.DatabaseScheduler' CELERY_RESULT_BACKEND = 'redis://:Redi$DB_withCelery@127.0.0.1:6234' CELERY_TASK_SERIALIZER = 'json' CELERY_ACCEPT_CONTENT = ['json'] # 忽略其他格式的传输内容 CELERY_RESULT_SERIALIZER = 'json' CELERY_TIMEZONE = 'Europe/Paris' CELERY_ENABLE_UTC = True CELERY_TRACK_STARTED = True CELERYD_POOL_RESTARTS = True
Device业务应用模块
tasks.py
from celery import shared_task from celery.schedules import crontab from celery.task import periodic_task from django.core.serializers import serialize from djcelery.schedulers import DatabaseScheduler, ModelEntry from .models import Device from .api.tools import TestDeviceApi @shared_task def count_devices(): return Device.objects.count() @shared_task(serializer='json', bind=True) def get_devices_state(): device_status = {} print(serialize('json', Device.objects.all())) for device in Device.objects.all(): status = TestDeviceApi(device).ping() device_status[device.id] = (serialize('json', [device]), status) return device_status @periodic_task(run_every=(crontab(minute='*/1'))) def print_random(): print(15)
现存问题
目前Worker端的任务加载功能运行正常,但Django Admin后台无法识别这些已定义的任务,待解决问题包含两个方向:
- 应当通过何种方式注册任务,才能在Django Admin的周期任务创建页面中看到这些任务并完成关联?这类注册操作是否是必要流程?
- 是否无需安装额外第三方模块,即可在Django Admin中展示硬编码定义的周期任务,是否存在框架内置的实现方案?还是需要在每次任务触发时自行将任务配置持久化到数据库中?
最终实现目标:为每个任务设置默认的调度规则,同时支持用户自主调整任务的执行调度策略。
内容的提问来源于stack exchange,提问作者Devart
相关产品推荐
相关产品推荐

