You need to enable JavaScript to run this app.
导航

队列管理

最近更新时间2023.04.18 20:00:37

首次发布时间2021.02.23 10:41:55

通过本功能,您可将项目下已绑定的队列,添加至队列管理列表,并对其进行使用规范配置,从而有效地约束队列在项目下的使用情况。

1 约束限制

仅项目管理员可以管理队列信息。

2 管理队列信息

  1. 登录 DataLeap 控制台。

  2. 单击左侧导航栏的项目管理,进入项目管理页面。

  3. 勾选我管理的选项,显示由您管理的项目列表。

  4. 单击项目列表中要管理项目操作列的 ... > 队列管理按钮,进入项目控制台队列管理页面。

  5. 可执行以下操作:

    • 添加队列

      单击添加队列按钮,在弹出的窗口中,设置队列配置信息后,单击确定按钮,完成队列添加。
      添加队列的相关参数说明如下表所示。其中名称前带 * 的参数为必填参数,名称前未带 * 的参数为可选参数。

      参数说明

      *引擎类型

      支持添加LAS、EMR、流式计算 Flink 版的引擎类型选择。
      项目引擎绑定的详细说明请参见创建项目的服务绑定参数引擎设置

      *引擎实例/项目

      • LAS、EMR引擎选择对应引擎下所绑定的引擎实例信息。

      • 流式计算 Flink 版引擎选择对应引擎下所绑定的引擎项目信息。

      *队列选择对应实例下所添加的队列或资源池信息。
      描述添加队列描述,方便后续管理操作。
    • 单击列表中某个队列信息操作列的编辑按钮,在弹出的编辑队列窗口中,可修改该队列的描述信息。

    • 单击列表中某个队列信息操作列的删除按钮,在弹出的确认删除对话框中,单击确定按钮,可删除该项目队列。

3 管理队列使用规范

  1. 登录 DataLeap 控制台。

  2. 单击左侧导航栏的项目管理,进入项目管理页面。

  3. 勾选我管理的选项,显示由您管理的项目列表。

  4. 单击项目列表中要管理项目操作列的 ... > 队列管理按钮,进入项目控制台队列管理页面。

  5. 单击列表中某个队列信息操作列的使用规范按钮,进入该队列的使用规范管理页面。

  6. 可执行以下操作:

    • 添加队列使用规范

      单击添加使用规范按钮,在弹出的窗口中,配置队列使用规范信息后,单击确定按钮,完成使用规范的创建。
      添加队列使用规范的相关参数说明如下表所示。其中名称前带 * 的参数为必填参数,名称前未带 * 的参数为可选参数。

      参数说明
      *规范名称队列使用规范的名称信息,自行输入设定。
      描述规范的描述信息,按需输入,方便后续管理。

      *应用范围

      队列使用规范的应用范围,支持以下四个选项,下拉可选:

      • 离线任务配置

      • 离线任务回溯

      • 临时查询

      • 流式任务配置

      说明

      同一个队列下,同一个应用范围仅可配置一个规范。

      更多设置

      选择应用范围后,可以添加多条范围限制信息。

      • 离线任务配置

        • 设定运行时间:属于排除设定时间段内的离线任务配置操作时,会命中使用规范。

        • 调度类型:选择属于排除某种调度类型时,会命中使用规范。

        • 任务类型:选择属于排除某种任务类型时,会命中使用规范。

        • 执行频率:选择属于排除任务是什么执行频率时,会命中使用规范。

      • 离线任务回溯

        • 运行时段:属于排除设定时间段内的离线任务回溯操作,会命中使用规范。

        • 回溯并发度:大于小于设定并发度数量的离线任务回溯操作,会命中使用规范。

      • 临时查询

        • 执行时间:属于排除设定时间段内的临时查询,会命中使用规范。
      • 流式任务配置

        • 任务类型:属于排除某种任务类型时,会命中使用规范。

      注意

      • 多个设置之间是“且”的关系,需要都满足条件后,方可提醒或禁止相应任务。

      • 操作命中应用范围下对应的规范设置时,会提醒队列使用规范。例如:应用范围选择离线任务回溯更多设置选择“运行时段属于10:00~19:00”,当您在 10:00~19:00 执行回溯任务时,就会命中使用规范。

      *规范表现形式

      当队列使用命中规范限制时,系统采取的表现形式。
      支持多个设置选项,当应用范围选择不同时,该参数的选项内容不完全相同。
      根据选择的不同,系统会有以下两种不同的表现形式:

      • 弱提醒:弹窗提醒

        当队列使用命中规范限制时,系统会提醒,但不阻断后续流程,若您坚持使用,后续操作仍可正常进行。

      • 强禁止:禁止任务调试/任务上线/发起回溯/临时查询

        当队列使用命中规范限制时,系统会阻断后续操作,您必须按照规范使用队列,才能正常执行调试/上线/运行/回溯等操作。

    • 单击规范列表中某条信息操作列的查看按钮,可查看该规范的详细信息。

    • 单击规范列表中某条信息操作列的编辑按钮,可修改该规范的配置信息。

    • 单击规范列表中某条信息操作列的关闭/开启复合按钮,可停用/启用该规范。

    • 单击规范列表中某条信息操作列的 ... > 删除按钮,在弹出的确认删除对话框中,单击确定按钮,可删除该规范。

4 操作结果

项目的队列使用规范添加成功后,规范范围内的任务在对应的阶段会触发该使用规范,具体的触发时机如下表所示。

提醒类型触发时机

弱提醒

  • 任务配置时,单击保存按钮。

  • 临时查询,单击运行按钮。

  • 数据回溯页面,单击确认按钮。

  • 实例重跑页面,单击确定按钮。

  • 回溯审批页面,单击确定按钮。

强禁止

  • 禁止任务上线:任务配置完,单击提交上线按钮。

  • 禁止任务调试:任务配置完,单击调试按钮。

  • 禁止临时查询运行:临时查询节点,单击运行按钮。

  • 禁止数据回溯:数据回溯页面,单击下一步按钮。