如何创建Databricks任务自动运行笔记本中的指定单元格?
实现Databricks笔记本指定单元格运行
完全可以实现只运行笔记本中第2和第4个单元格的需求,下面是两种实用的方法:
方法一:利用单元格标签筛选执行
- 打开目标Databricks笔记本,给第2、4个单元格添加自定义标签(比如
job_run):右键单元格 → 选择"添加标签"输入标签内容 - 创建Databricks任务时,在"笔记本任务"的配置项里,找到"运行选项",填入参数
--tags "job_run" - 任务执行时,只会运行带有该标签的单元格,其余未标记的单元格会被自动跳过
方法二:通过环境变量+条件判断控制
- 在第2、4个单元格的最开头添加条件判断代码,示例(以Python为例):
import os # 仅当环境变量指定时才执行后续代码 if os.getenv("RUN_TARGET_CELLS") == "yes": # 这里放原单元格的业务代码
- 创建任务时,在任务配置的"环境变量"中添加键值对:
RUN_TARGET_CELLS=yes - 这样任务运行时,只有这两个单元格会执行代码,其他单元格不受影响(也可以给其他单元格添加反向条件确保跳过)
内容的提问来源于stack exchange,提问作者Alejandro Gómez
相关产品推荐
相关产品推荐

