You need to enable JavaScript to run this app.
优惠活动
大模型
产品
解决方案
定价
更多

关于SQLake中停止作业后管道及依赖作业行为的问询

SQLake作业停止相关问题解答

问题1:在SQLake中,若停止数据摄入复制作业或中间转换作业,对应的管道会产生何种变化?

  • 停止数据摄入复制作业:管道的数据源输入直接中断,下游所有依赖该摄入作业的转换、输出作业会因为没有新数据流入,逐步进入等待状态;如果是有状态的作业,会保留当前的状态快照,等摄入作业重启后就能恢复处理。
  • 停止中间转换作业:该节点的数据流会中断,下游依赖它的作业会停止接收新数据,上游作业则会继续产生数据(如果是持续运行类型),直到缓冲区满或者触发流控机制;有状态的转换作业也会保留当前状态,重启后可接续处理未完成的数据。

问题2:常规(非同步)作业基于提交时间运行,当前版本中停止任意作业会导致整个管道终止,请问SQLake是否也会出现该情况,还是仅同步作业会如此?

  • SQLake里只有同步管道会出现停止任意作业就导致整个管道终止的情况。
  • 由非同步(常规)作业组成的管道,各个作业是独立调度执行的:停止单个作业只会中断该作业对应的处理链路,不会影响其他无依赖的作业;但如果是有依赖关系的上下游,下游作业会因上游停摆而无数据可处理,进入闲置状态,但不会让整个管道里的其他无关作业也终止运行。

内容的提问来源于stack exchange,提问作者Ajay C

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.08.13 08:55:31