You need to enable JavaScript to run this app.
导航

离线降级管理

最近更新时间2023.09.28 14:16:19

首次发布时间2023.09.28 14:16:19

为应对突发流量高峰(例如春节等重大节假日)或是突发的计算资源异常,各业务可能会根据任务的重要程度,采取分级运行策略,即优先保证核心任务运行,降级非核心任务,让渡计算资源。
离线降级管理功能可通过调度限制实现低优任务的降级运行,同时也支持对任务的相关报警进行批量ACK设置。

  • 调度限制:指定时段,限制指定任务提交调度。

  • 报警屏蔽:某时段被禁止调度的任务,若配置有相关报警,为规避禁止调度期间的无效报警产生,可通过报警屏蔽,批量屏蔽时效类报警。

1 约束限制

仅项目管理员可以配置离线降级规则。

2 前提条件

已开通 DataOps 敏捷研发湖仓一体分布式数据自治服务。

3 操作步骤

  1. 登录 DataLeap 控制台。

  2. 单击左侧导航栏的项目管理,进入项目管理页面。

  3. 勾选我管理的选项,显示由您管理的项目列表。

  4. 单击项目列表中要管理项目操作列的任一按钮,进入项目控制台

  5. 单击左侧导航栏的离线降级管理,进入离线降级管理页面。

  6. 单击调度限制报警屏蔽页签,进入相应页面,可分别执行以下操作:

    • 调度限制

      • 新建规则

        单击新建规则按钮,在弹出的新建规则窗口中,设置调度限制规则后,单击确定按钮完成创建。
        创建调度限制规则的相关参数说明如下表所示。其中名称前带 * 的参数为必填参数,名称前未带 * 的参数为可选参数。

        参数说明
        *规则名称调度限制规则的名称,自行设置。
        *描述规则的说明信息,以便后续管理。

        *应用任务

        采用调度限制规则的任务,可从以下几方面选择设置:

        • 优先级:任务的优先级,由高至低依次为D1~D5,下拉可选。

        • 任务类型:任务的类型,支持离线集成、EMR Doris 等多种类型选项,下拉可选,可设置多个。

        • 责任人:任务的责任人,输入账号关键词下拉可选,可设置多个。

        • 排除设置:要排除的符合规则的任务。搜索任务名称关键词或ID后,下拉可选。

        说明

        优先级、任务类型和责任人至少要设置一项。

        *禁止调度时段应用任务禁止调度的时间段。
      • 编辑规则

        单击列表中某条信息操作列的编辑按钮,在弹出的窗口中,可以修改该规则信息。

      • 开启/关闭规则

        单击列表中某条信息操作列的开启/关闭复合按钮,二次确认后,可以开启/关闭该规则。关闭后,规则不再起作用。

      • 删除规则

        单击列表中某条信息操作列的删除按钮,二次确认后,删除该规则。

    • 报警屏蔽

      • 新建规则

        单击新建规则按钮,在弹出的新建规则窗口中,设置调度限制规则后,单击确定按钮完成创建。
        创建报警屏蔽规则的相关参数说明如下表所示。

        参数说明
        *规则名称调度限制规则的名称,自行设置。
        *描述规则的说明信息,以便后续管理。

        *应用任务

        采用调度限制规则的任务,可从以下几方面选择设置:

        • 优先级:任务的优先级,由高至低依次为D1~D5,下拉可选。

        • 任务类型:任务的类型,支持离线集成、EMR Doris 等多种类型选项,下拉可选,可设置多个。

        • 责任人:任务的责任人,输入账号关键词下拉可选,可设置多个。

        说明

        优先级、任务类型和责任人至少要设置一项。

        *被屏蔽报警类型屏蔽的应用任务报警类型,支持执行失败、未执行成功、数据产出监控等多类选项,下拉可选,可多选。

        *报警屏蔽时段

        屏蔽应用任务报警的时间段。

        说明

        由于任务运行需要时间,报警屏蔽时段一般长于禁止调度时段

        ACK操作通知报警屏蔽确认通知,提供发送给报警接收人、不发送两个选项,默认不发送。
      • 编辑规则

        单击列表中某条信息操作列的编辑按钮,在弹出的窗口中,可以修改该规则信息。

      说明

      • 报警屏蔽规则一旦设置,在屏蔽时段会一直生效,如需提前结束屏蔽,可修改屏蔽时段。

      • 如需屏蔽基线相关报警,请前往基线管理页面,关闭保障任务所在基线。