任务运维

1 数据回溯

数据回溯通俗来说即对任务重跑操作，通过对dwd任务及下游关联任务链发起回溯，对谨慎回溯提醒进行确认后执行。
单击查看数据回溯的更多细节操作说明。

1. 使用demo02点击顶导「运维中心」->离线任务运维，进行接下来的数据回溯工作。
   
2. 在离线任务运维->数据回溯->发起的中，点击新建数据回溯。
   
3. 在数据回溯配置界面，选择回溯任务的配置信息，
   1. 回溯范围：单任务及其下游
   2. 回溯任务：dwd_action_exam_detail_df
   3. 回溯业务时间：2022-08-09（T-1）
   4. 下游自依赖任务：按照完整依赖设置获取回溯实例
   5. 指定运行时段：否
   6. 提升回溯优先级：否
   7. 回溯任务选择：（全部勾选）
      此时，即可将dwd_action_exam_detail_df及其所有的下游任务dwm任务，进行整体回溯，确认输入信息无误，点击下一步
      
4. 根据前期dwd的配置，在dwd「谨慎回溯」配置界面，点击确认动作：
5. 在回溯任务配置界面，设置任务信息：
   1. 最大并行：2（此参数为任务并发量，按需设置即可）
   2. 回溯原因：数据刷新重跑任务
      确认无误后，点击确定。
6. 提交操作成功后，发起回溯
7. 状态显示完成及进度显示，更多细节请点击查看详情。

2 临时查询

1. 点击顶导任务开发，重新回到数据开发界面。
2. 在左侧列表中选择临时查询标签，点击“新建查询”。
   
3. 更新引擎选择 LAS、名称和保存地址，点击确定，进入临时查询界面。
4. 左侧点击进入数据库，搜索目标表 student_info_df，点击全选字段。点击「生成使用语句」，编辑器将自动生成sql语句
   
5. 在where条件中筛选条件变量date输入常量分区yyyymmdd 点击运行，数据结果中显示运行成功。

3 任务运维

3.1 配置运行监控规则

1. 点击顶导的运维中心->在离线任务运维界面，依次点击“监控规则”->“新建监控规则”
   
2. 基本信息
   设置以下监控规则基本信息：
   • 规则名称：破线监控
   • 规则对象：dwm_action_exam_summary_df
3. 监控报警
   • 失败告警：第 3 次运行失败
   • 超时报警：运行耗时超过30分钟
   • 5分钟后仍未开始运行（例如：正常8点运行，8：05仍未启动任务）
   • 10分钟后任务未结束 （例如：正常8点运行，8：10分任务还没结束）
   • 15分钟后任务仍未成功 （例如：正常8点运行，8：15分任务处于未启动运行等状态，但未显示成功）
4. 接收人
   设置项目用户为 demo02
5. 报警设置
   • 监控范围：全部实例（含历史实例）
   • 报警形式：普通
   • 发送方式：邮件（创建账号时设置的邮箱地址）
   • 发送次数：1
   • 发送间隔：5min
   • 免打扰时段：关闭
6. 确认输入无误后，点击“提交”即可创建成功，当任务运行失败时，便会发送邮件告警给demo02

3.2 配置监控提醒

1. 选择dwd运行监控
   
2. 选择是，复用已创建好的破线规则
3. 点击+号，继续创建监控规则2
4. 配置截止北京时间8:10分，只要dwd任务没运行成功，则紧急报警，点击提交
5. 在监控规则中，显示新规则已生效
6. 您也可以在更多操作中，查看如果7天内，3天内的任务历史运行耗时情况
   

3.3 任务依赖DAG

1. 点击dwm的任务DAG，查看任务依赖关系是否正确；
   
2. 并查看状态栏显示属性，操作日志，代码等信息。

4 实例运维

4.1 实例运行情况

点击左侧导航实例运维，可根据任务状态查看到实例运行情况包含：

• 您可查看成功执行，等待中，运行中，失败等不同实例状态；
• 点击更多实例操作，可重跑或查看实例日志；
• 全选实例，点下方【导出】按钮，点击确定按钮，完成实例列表的导出操作；
• 您也可将实例详细的运行日志下载到本地，并分享给其他成员查看；
• 点击实例DAG按钮，您便可以查看实例上下游血缘信息，操作日志，属性，代码等。