任务运维

1 数据回溯

数据回溯通俗来说即对任务重跑操作，通过对dwd任务及下游关联任务链发起回溯，对谨慎回溯提醒进行确认后执行。
点击查看数据回溯的更多细节

1）使用demo02点击顶导「运维中心」->离线任务运维，进行接下来的数据回溯工作。

2）在离线任务运维->数据回溯->发起的中，点击新建数据回溯。

3）在数据回溯配置界面，选择回溯任务的配置信息，

• 回溯范围：单任务及其下游

• 回溯任务：dwd_action_exam_detail_df

• 回溯业务时间：2022-08-09（T-1）

• 下游自依赖任务：按照完整依赖设置获取回溯实例

• 指定运行时段：否

• 提升回溯优先级：否

• 回溯任务选择：（全部勾选）

此时，即可将dwd_action_exam_detail_df及其所有的下游任务dwm任务，进行整体回溯，确认输入信息无误，点击下一步

4）根据前期dwd的配置，在dwd「谨慎回溯」配置界面，点击确认动作：
5）在回溯任务配置界面，设置任务信息：

• 最大并行：2（此参数为任务并发量，按需设置即可）

• 回溯原因：数据刷新重跑任务

确认无误，点击确定。
6）提交操作成功后，发起回溯
7）状态显示完成及进度显示，更多细节请点击查看详情

2 临时查询

1）点击顶导任务开发，重新回到数据开发界面。
2）在左侧列表中选择临时查询标签，点击“新建查询”。

3）更新引擎选择 LAS、名称和保存地址，点击确定，进入临时查询界面。
4）左侧点击进入数据库，搜索目标表 student_info_df，点击全选字段。点击「生成使用语句」，编辑器将自动生成sql语句

5）在where条件中筛选条件变量date输入常量分区yyyymmdd 点击运行，数据结果中显示运行成功。

3 任务运维

3.1 配置运行监控规则

1）点击顶导的运维中心->在离线任务运维界面，依次点击“监控规则”->“新建监控规则”

2）基本信息

• 规则名称：破线监控

• 规则对象：dwm_action_exam_summary_df

监控报警

• 失败告警：第 3 次运行失败

• 超时报警：运行耗时超过30分钟

• 5分钟后仍未开始运行（例如：正常8点运行，8：05仍未启动任务）

• 10分钟后任务未结束 （例如：正常8点运行，8：10分任务还没结束）

• 15分钟后任务仍未成功 （例如：正常8点运行，8：15分任务处于未启动运行等状态，但未显示成功）

接收人

• demo02

报警设置

• 报警形式：普通

• 发送方式：邮件（创建账号时设置的邮箱地址）

• 发送次数：1

• 发送间隔：5min

• 免打扰时段：关闭

确认输入无误后，点击“提交”即可创建成功，当任务运行失败时，会发送邮件告警给demo02

4）显示配置完成

3.2 配置监控提醒

1）选择dwd运行监控

2）选择是，复用已创建好的破线规则
3）点击+号，继续创建监控规则2
4）配置截止北京时间8:10分，只要dwd任务没运行成功，则紧急报警，点击提交
5）在监控规则中，显示新规则已生效
6）您也可以在更多操作中，查看如果7天内，3天内的任务历史运行耗时情况

3.3 任务依赖DAG

1）点击dwm的任务DAG，查看任务依赖关系是否正确

2）状态栏显示属性，操作日志，代码等信息查询

4 实例运维

4.1 实例运行情况

1）点击左侧导航实例运维，可根据任务状态查看到实例运行情况包含

• 成功执行，等待中，运行中，失败 等不同实例状态

• 点击更多实例操作，可重跑或查看实例日志

2）全选实例，点下方【导出】按钮，点击确定
3）您可分享实例详细运行日志，并分享给其他成员
4）点击实例DAG

5）您可以看到实例上下游血缘信息，操作日志，属性，代码等