在Django应用中如何每5秒执行函数更新数据库并自动刷新页面
问题本质
你之前的实现走不通的核心原因是把定时调度逻辑和Django的Web请求处理链路耦合在了一起:
- 同步
while()循环会直接占住WSGI worker进程,循环没跑完的话,所有用户的HTTP请求都没法被处理 - 单独写异步函数但没有独立的调度器触发,等于函数从来没被按间隔执行过,自然达不到效果
- 原代码里在模块顶层直接调用
parseSite(),只会在Django服务重启的瞬间执行一次抓取,没有任何持续运行的逻辑
正确实现步骤
1. 解耦定时抓取逻辑和Web服务
首先把原来顶层的parseSite()调用删掉,避免服务启动时无意义的阻塞。
把定时调度做成独立的守护线程,和Web请求的处理流程完全隔离开,不会因为循环sleep堵死用户访问。
在应用的apps.py里配置服务启动时拉起独立调度线程:
# main/apps.py import os import time import threading from django.apps import AppConfig class MainConfig(AppConfig): default_auto_field = 'django.db.models.BigAutoField' name = 'main' def ready(self): # 避免Django开发模式自动重载时重复启动调度线程 if os.environ.get('RUN_MAIN') != 'true': return from main.views import parseSite # 引入你写好的抓取函数 def scheduled_runner(): while True: try: parseSite() except Exception as e: print(f"抓取任务执行异常: {e}") # 每5秒执行一次,和循环解耦,不占Web worker time.sleep(5) # 设为守护线程,主服务退出时线程自动销毁,不会残留进程 threading.Thread(target=scheduled_runner, daemon=True).start()
2. 修正原有代码的异常隐患
原来的parseSite()里先全表删除、再新增记录的逻辑有明显风险:如果抓取过程中网络异常、解析失败,数据库会被清空,下次页面查询时直接抛“对象不存在”的错误。
把查询和写入逻辑做容错处理:
# 替换原来的dates()函数,避免空数据报错 def dates(): bitoc2, _ = Prices.objects.get_or_create( curency_type="bitcoin", defaults={"curency_price": "初始化"} ) return bitoc2
3. 实现页面自动重载
不需要复杂的前端框架,在模板的<head>标签里加原生的刷新配置就能实现每5秒自动重载页面:
<!-- main/index.html --> <head> <meta http-equiv="refresh" content="5"> <!-- 其余原有模板内容 --> </head>
如果不想整页刷新,也可以用原生JS定时发请求拿最新价格做局部更新,整页刷新的方案完全匹配你最初的需求,没有额外开发成本。
关键避坑点
- 绝对不要在视图函数、路由处理逻辑里写无限循环,每个用户访问都会触发一个独立的循环进程,快速把服务器内存占满
- 不要在Web请求的同步流程里写长时sleep,会堵死worker进程,导致所有用户的请求排队阻塞
- 5秒的抓取间隔对公开网站来说容易触发反爬限制,实际部署时建议调整到合理范围,避免被目标站点封禁IP
- 这种简单的线程调度方案适合小流量场景,如果后续需要更稳定的定时任务调度,可以替换成成熟的独立任务调度组件,不需要改动原有业务逻辑
内容的提问来源于stack exchange,提问作者Ded Helper
相关产品推荐
相关产品推荐

