寻找适用于Node.js的基于时间的持久化动态调度器解决方案

Node.js 生态适配方案 #

如果你希望在现有Node.js技术栈内解决问题，可以选择以下方案：

• 优化现有Agenda配置
  如果你已经调研过Agenda，可将任务配置为一次性执行类型，任务执行完成后会自动从数据库中删除，不会残留。但需要注意Agenda默认依赖定时轮询MongoDB获取待执行任务，相比Redis方案会有更高的性能损耗。
• BullMQ 延迟任务队列
  基于Redis实现，天然支持数据持久化。创建任务时指定delay参数对应到目标执行时间戳，设置为一次性任务后，执行完成会自动归档销毁，不会常驻内存。服务重启时会自动从Redis读取未完成的任务恢复调度，支持随时动态新增任务，无需轮询业务数据库，性能损耗极低。
• 基于Redis ZSet自研轻量调度器
  如果不想引入过重的队列框架，可以自行基于Redis有序集合（ZSet）实现极简调度逻辑：
  1. 新增任务时，将目标执行时间戳作为score，序列化后的任务数据作为member存入ZSet
  2. 服务启动时拉取ZSet内所有score大于当前时间的任务，设置对应计时器到点执行
  3. 额外配置一个每秒执行的轻量扫查逻辑，拉取ZSet中score小于等于当前时间的任务执行，完成后立即从ZSet中删除对应member
     该方案逻辑可控，Redis持久化机制可保证服务重启任务不丢失，任务执行完无残留。

跨语言通用调度方案 #

如果可以接受引入独立调度服务，可选择成熟的分布式调度组件：

• XXL-Job 分布式调度中心
  支持动态添加一次性定时任务，任务数据持久化到数据库，执行完成后自动失效，服务重启任务不会丢失。你可以将Node.js服务接入为XXL-Job的执行器，调度中心到点会主动调用Node.js服务的对应接口执行提醒推送逻辑。
• Quartz 调度框架
  支持一次性任务、数据持久化到数据库，任务执行完成后自动移除。你可以单独搭建Java版的Quartz调度服务，到点调用Node.js服务的接口执行业务逻辑即可，完全满足动态新增、持久化、无残留的要求。

内容的提问来源于stack exchange，提问作者Sethuraman Srinivasan