You need to enable JavaScript to run this app.
最新活动
产品
解决方案
定价
生态与合作
支持与服务
开发者
了解我们
导航

创建项目

最近更新时间2023.08.17 19:24:09

首次发布时间2022.09.26 20:53:58

1 约束限制

仅租户主账号或具备 DataLeapFullAccess 权限的 IAM 子账号才可创建项目。关于账号的详细说明请参见账号权限

2 操作步骤

  1. 登录 DataLeap 控制台。

  2. 单击左侧导航栏的项目管理,进入项目管理页面。

  3. 单击创建项目按钮,进入创建项目页面。

  4. 设置项目相关配置信息后,单击确定按钮,即完成项目创建。

    新建项目相关参数说明如下表所示。其中名称前带 * 的参数为必填参数,名称前未带 * 的参数为可选参数。

    参数说明
    基础信息

    *当前区域

    当前 DataLeap 服务所属的地域信息,默认为开通 DataLeap 服务时选择的区域,此处不可编辑。

    说明

    若开通了多个区域,可通过页面顶端导航栏的区域下拉框选择靠近您业务的区域。

    *项目名称

    创建项目的名称,按需设置。
    仅可由汉字、字母、数字、下划线、或特殊字符.、[]、【】、()、()组成。

    *项目类型

    分为公开和私有。

    • 公开:只要是租户成员,即可进入项目,查看项目下的任务信息。

    • 私有:只有该项目下的成员,才可进入项目,查看项目下的任务信息。

    说明

    开通 DataOps敏捷研发湖仓一体分布式数据自治服务后,项目类型才可设置为私有。

    *项目模式目前仅提供简单模式
    *所有者租户主账号,不可修改。
    *项目描述项目有关的描述信息。
    项目账号项目下任务若需要使用统一的账号提交鉴权,可将租户主账号/租户下某子账号设置为项目账号。
    项目管控

    *鉴权配置

    开发、生产环境对应的提交鉴权账号设置。

    • 未配置项目账号:开发、生产环境鉴权,仅可使用用户账号

    • 已配置项目账号:生产环境鉴权,可按需选择使用用户账号项目账号;开发环境鉴权,默认使用用户账号

    *项目回溯控制

    无本项目编辑权限的用户,通过上游回溯本项目下的任务,选择是否需要审批。

    • 直接执行:无本项目编辑权限用户,通过上游回溯本项目下的任务,直接生成对应回溯实例且执行。

    • 审批同意后执行:无本项目编辑权限用户,通过上游回溯本项目下的任务,需要任务责任人或是项目管理员审批同意后,才能生成回溯实例且执行。

    项目最大并行度

    项目内任务运行的最大并行数,设置范围为1~5000的整数,项目最大并行度应大于等于项目重跑最大并行度。

    说明

    由于目前使用公共调度资源组,单个租户最大的并行度是100,即一个租户下各项目最大的并行度上限值是100。

    项目重跑最大并行度

    项目重跑的任务运行最大并行数,设置范围为1~5000的整数,项目重跑最大并行度应小于等于项目最大并行度。

    说明

    现阶段项目重跑最大并行度的上限值也是100。

    默认监控规则系统提供的基础监控规则,若选择启用,则项目内任务上线时,会默认启用监控规则。

    数据安全设置

    项目下查询数据结果相关的安全设置。

    • 任务查询结果显示最大记录:任务查询返回结果可显示的最大记录数。可按需设置,设置范围为1~10000的整数,默认值为1000。

    • Select查询结果设置:可选择是否允许下载和复制查询结果。

    服务绑定

    *计算资源组设置

    用于Notebook、Python、Shell等任务类型任务执行。
    支持选择公共计算资源组和独享计算资源组。

    *调度资源组设置目前已支持公共调度资源组。
    数据集成资源组设置可按需绑定已开通的数据集成资源组,单击去创建会跳转至独享资源组管理页面。

    引擎设置

    已开通引擎 E-MapReduce(EMR)、湖仓一体分析服务(LAS)和流式计算 Flink 版,可按需绑定。单击去购买会跳转至相应的管理页面。

    • E-MapReduce:火山引擎提供的在线计算引擎,支持Hadoop、Spark、HBase、Hive、Flink等大数据组件。设置项包括 EMR 集群Yarn 队列访问模式

      当绑定 EMR 集群时,仅可选择未绑定项目的 EMR 集群。EMR 集群下对应的 Yarn 队列,默认为 root.default。

      说明

      • 项目和 EMR 集群是一对一的绑定关系,即每个项目只能绑定1个 EMR 集群,且1个 EMR 集群只能被1个项目绑定。

      • EMR 引擎目前支持绑定 Hadoop、TensorFlow、Flink、Doris 和 StarRocks 五种集群类型的 EMR 版本,其中 Doris 和 StarRocks 仅支持绑定 3.2.1 版本。不同版本说明请参见 EMR版本概述

      • 项目需绑定 EMR 1.3.1 或之前的版本,且集群中需包含 Flink 组件服务,方可创建 EMR 流式数据任务,其余版本将在后续支持创建流式数据任务。EMR 支持的任务类型请参见数据开发 > 概述

    • 湖仓一体分析服务:Serverless湖仓一体分析服务,企业级标准构建湖仓分析平台。设置项包括服务实例LAS队列

      当绑定湖仓一体分析服务引擎实例时,服务实例默认选择 default,支持绑定多个服务实例下对应的LAS队列。每个LAS队列的显示信息包括队列名称、队列类型(公共队列、独占队列)、具体状态(如正常、到期停服、欠费等)。

    • 流式计算 Flink 版:企业级全托管流式计算平台,支持开箱即用,Serverless极致弹性,极简SQL开发,流批一体等特性。设置项包括引擎项目资源池

      • 引擎项目:是指已在该引擎上创建的项目,下拉可选。绑定后,当前项目下任务会映射至对应引擎项目。

      • 资源池:引擎项目下已创建的资源池,下拉可选,支持绑定多个。


说明

  • 只有任务责任人和项目账号都具备 LAS 队列使用权限时,才可以向绑定的 LAS 队列提交任务。否则,需主账号前往 LAS控制台 > 权限管理 授予其队列权限。

  • 通过概览页面的新建项目按钮,也可创建项目。