You need to enable JavaScript to run this app.
最新活动
产品
解决方案
定价
生态与合作
支持与服务
开发者
了解我们
导航

资源组管理

最近更新时间2023.07.03 19:33:49

首次发布时间2021.08.13 15:07:14

DataLeap 支持公共资源组和独享资源组两大类资源组类型,本文将为您介绍如何选择和使用这些资源组。

1 费用说明

公共资源组支持按量付费模式,独享资源组支持包年包月模式。
各类资源组的费用说明详情请参见资源组计费说明

2 使用限制

  • 仅支持主账号购买并管理独享资源组。

  • DataLeap 产品若仅开通大数据集成服务,暂不支持购买独享计算资源组

3 资源组分类

按照资源组类型的不同,资源组分为独享资源组和公共资源组,具体说明如下表所示。

资源组类型计费方式资源组描述适用场景

公共资源组

按量付费

开通 DataLeap 产品服务后,将会自动为您提供公共资源组,包含公共调度资源组、公共计算资源组和公共数据服务资源组。
由于 DataLeap 所有用户共享使用公共资源组资源,任务运行高峰期可能会出现不同用户间抢占资源的情况,无法保证任务及时执行完成。

常用于测试环境、低并发和优先级较低的任务场景。

独享资源组

包年包月

  • 包含独享数据集成资源组和独享计算资源组,需购买使用。

  • 支持扩容、缩容、规格变更等灵活配置。

  • 购买后将拥有该资源组的独立使用权。

  • 支持自行分配各资源组的项目绑定和任务使用情况。

  • 适用于业务对任务执行时间、完成时间很敏感,需要强保障、时效性要求高的任务场景。

  • 线上业务较稳定,日调度任务较多时,包年包月拥有更高性价比,更划算。

4 购买资源组

开通 DataLeap 产品服务后,公共资源组无需购买即可使用,独享资源组则需购买才能使用。

注意

由于 DataLeap 用户共享使用公共资源组,任务高峰期时无法保证任务及时执行完成,因此任务多或者有高优保障的任务需要运行时,建议购买独享资源组

购买独享资源组的步骤如下:

  1. 登录 DataLeap 控制台

  2. 选择资源组管理 > 独享资源组,进入独享资源组页面。

  3. 单击创建资源组按钮,进入创建资源组页面。

    alt

  4. 设置资源组信息,单击提交按钮后,根据页面提示支付费用,完成独享资源组的购买。

    创建独享资源组相关参数说明如下表所示。其中名称前带 * 的参数为必填参数,名称前未带 * 的参数为可选参数。

    参数说明
    基础信息

    *资源组类型

    • 独享数据集成:独享数据集成资源组,仅用于数据同步任务。

    • 独享任务计算:独享计算资源组,仅用于Notebook、Python、Shell任务类型。

    *区域

    当前 DataLeap 服务所属的地域信息,默认为开通 DataLeap 服务时选择的区域,此处不可编辑。

    说明

    若开通了多个区域,可通过页面顶端导航栏的区域下拉框选择靠近您业务的区域。

    *可用区

    指同一地域中电力、网络隔离的物理地域,支持可用区A和可用区B两个选项。

    说明

    在同一私有网络内,可用区之间内网互通。

    *资源组名称

    资源组的名称,自行设定,一旦设定不可更改。
    名称必须以数字或字母开始和结尾,支持包含数字、下划线_、小写字母a-z,且长度需为3~50个字符。

    资源组备注输入资源组说明信息,方便后续使用管理。
    资源配置

    *资源规格

    • 独享数据集成:仅支持 1CU(1C/2GiB)。

    • 独享任务计算:支持4CU(4C/16GiB)、8CU(8C/32GiB)、16CU(16C/64GiB)、32CU(32C/128GiB)共 4 种规格。

    规格计费详情请参见资源组计费说明

    *资源数量

    选择购买资源组的数量。

    • 独享数据集成:数量限制为4~200台,输入值需为4的倍数。

    • 独享任务计算

      • 4CU规格,数量限制为1~50台。

      • 8CU规格,数量限制为1~25台。

      • 16CU规格,数量限制为1~12台。

      • 32CU规格,数量限制为1~6台。

    规格计费详情请参见资源组计费说明

    付费信息
    *计费类型包年包月。
    *计费周期您可以选择一次性购买的周期,或者勾选自动续费按钮,系统在一轮周期到期后,按月进行自动续费。
    配置信息

    *TOS对象存储

    用于资源组运行集成任务时的日志存储,下拉可选已创建的存储。如现有存储不符合您的要求,可以前往 TOS 创建。
    资源组类型选择独享数据集成时,需设置该参数。

    *私有网络选择数据源或任务需访问资源所在的私有网络。如现有私有网络不符合您的要求,请前往控制台创建私有网络
    *子网选择VPC下对应可选的子网信息。如现有子网不符合您的要求,需前往子网控制台创建子网
    *安全组选择挂载在VPC下的安全组信息。如现有安全组不符合您的要求,需前往安全组控制台创建安全组

5 管理资源组

当前租户在当前区域下创建的所有资源组,会展示在相应的资源组管理列表中,您可对独享资源组和公共资源组分别进行管理。

5.1 管理独享资源组

独享资源组包含独享集成资源组和独享计算资源组。在当前区域下创建的独享资源组会分别展示在相应页面,您可按需对其进行删、查、续费等管理操作,步骤如下:

  1. 登录 DataLeap 控制台

  2. 选择资源组管理 > 独享资源组,进入独享资源组页面。

  3. 单击独享集成资源组独享计算资源组页签,进入相应页面。

  4. 可分别执行以下管理操作:

    • 搜索资源组

      • 输入资源组名称关键词,单击搜索图标或按回车键,可以查看符合条件的资源组列表。

      • 单击列表中参数状态旁的筛选图标,通过选择资源组的运行状态来筛选资源组。

    • 查看资源组详情

      1. 单击资源组名称,进入资源组详情页面。

      2. 可以查看购买的资源组配置、付费信息、网络配置信息等,并执行以下操作:

        • 单击付费信息栏的订单号,查看购买资源组的订单号信息。

        • 单击付费信息栏的续费按钮,可以按需为该资源组续费。

    • 续费

      单击运行中或运行失败的资源组操作列的续费按钮,可以按需为该资源组续费。

    • 修改镜像配置
      单击某条资源组信息操作列的修改镜像配置按钮,在弹出的窗口中,修改镜像配置信息后,单击确定按钮完成配置。

      注意

      • 华北2(北京) 区域的独享计算资源组支持该私有镜像配置功能。

      • 一个镜像仓库可以绑定多个资源组。

      • 更改网络配置或者镜像配置可能导致使用该计算资源组的任务运行失败,请谨慎修改。

      修改镜像配置的相关参数说明如下表所示。

      参数说明

      镜像仓库地址

      该资源组的镜像仓库访问地址,可使用第三方镜像地址、火山镜像仓库地址,如 dt1-cn-beijing.cr.volces.com。
      若无合适的镜像仓库地址,可单击创建镜像,跳转到镜像仓库平台,创建并管理仓库实例。相关操作说明可参见创建标准版实例推送和拉取镜像

      用户名

      创建镜像仓库实例的用户名。
      在对应的仓库实例页面,可以查看用户名(username)。

      密码

      镜像仓库实例的登录密码。
      在对应的仓库实例页面,可以修改该密码。

      注意

      请确保密码输入正确,否则会导致绑定的任务运行失败。

    • 删除资源组

      单击创建失败或已释放状态下的资源组操作列的删除按钮,二次确认后,可以删除该资源组。

5.2 管理公共资源组

开通DataLeap产品服务后,系统会自动提供公共资源组,无需手动管理。

6 使用资源组

只有处于运行中状态的资源组绑定到对应项目下,才可进行使用。一个独享资源组可以绑定多个项目,一个项目也支持绑定多个资源组。
绑定资源组有以下两种方式:

  • 新建项目绑定资源组:在新建项目 > 服务绑定 > 资源组设置中,选择需要绑定的资源组。详细操作说明请参见创建项目

  • 修改已有项目资源组:在项目管理 > 具体项目的配置信息中,单击编辑按钮,修改服务绑定下的资源组设置。详细操作说明请参见修改项目配置信息

    注意

    修改已绑定的独享资源组时,若有已启用的任务在使用该资源组,则该资源组不允许替换或删除。

资源组绑定成功后,可分别用于以下场景。

资源组说明
独享资源组
独享集成资源组用于集成同步任务运行所需的资源组,通过该资源组来实现各数据源之间的数据传输。
独享计算资源组用于Notebook、Python、Shell等任务的独享计算资源。
公共资源组
公共调度资源组通过调度资源组,将任务下发至对应引擎或资源组上执行。
公共计算资源组用于Notebook、Python、Shell等任务的公共计算资源。
公共数据服务资源组用于数据服务调用API,查询数据时使用。