最近更新时间:2024.04.19 10:33:04
首次发布时间:2024.01.18 11:30:45
系统管理,是指系统管理员可以进入系统管理模块,查看系统信息,进行系统的用户管理,操作办公平台集成,安全设置,以及进行数据运维配置等工作。
结合贵公司部署的产品版本的不同,如 SaaS 版本、私有化部署版本等,您的系统管理功能入口与界面也可能会稍有不同,但整体可以实现的能力相对一致,均包含上述几个模块。本文将为您介绍的是云上部署的 SaaS 版本的系统管理内容,若您部署的是私有化版本的产品则可查看该文档:系统管理概述-私部版。
SaaS 导航栏
在智能数据洞察产品页面内,点击右上角留言框,进入查看系统信息。用户可查阅当前系统版本、状态、用户数、到期时间以及距离到期的到期日等。
对于有办公平台集成需求的客户,请参照文档完成前置配置后,在此页面进行账号关联配置。办公平台集成相关配置,可查看:飞书、企业微信、Webex、钉钉。账号关联配置具体内容可以查看《系统管理综述》。
具体内容可查看《办公平台集成》。
(1)水印设置:支持配置 PC 及移动端水印。
(2)复制与下载:支持配置系统全局的复制及下载权限。
(3)网络区访问控制:仅限私有化部署支持,SaaS版本可忽略。
(4)安全运维:支持生成运维Token,实现灵活的运维支持方式。
本产品为用户提供灵活的任务调度依赖配置功能。调度依赖通常是指数据同步、数据开发过程中周期调度节点间的上下游依赖关系。通过节点的依赖关系有序调度任务运行上下游节点,即当上游节点运行成功后,下游节点才会启动运行,保障适时的产出有效业务数据。本产品的依赖配置提供了自动检测上游数据有无产出和自定义配置依赖两大类方式。
如果企业内已经存在相关的数据开发或数据处理任务的调度平台,且能够满足按照本产品的 API 规范进行配置,那么可以与本产品实现对接与联动,完成构建该调度平台的任务状态依赖关系。如果企业选择采用三方 API 配置依赖关系,那么用户需要先在系统管理的任务管理模块, 进行 API 配置(即本章节为您介绍的内容),然后在可视化建模和数据集的依赖配置模块完成任务调度的依赖配置。
具体操作流程如下:
(1) 完成API配置
点击新建 API 任务依赖,进入 API 配置表单。根据数据源的不同接口,可以配置多个 API 依赖。
第一步:前置操作
请您完成以下必填信息:
第二步:API配置
配置一:URL
Params 中的 Key 和 Value 会自动拼接到自定义 URL 中。说明栏中包含样例 URL。
配置二:Params
请求参数说明:
Params 中的 Key 和 Value 会自动拼接到自定义 URL 中,其中 Key 的名称可以自定义,Value 参数格式不变。系统可以根据参数内容自动传入特定任务参数,您可根据需求选择使用。
系统参数Params:
参数 | 备注 |
---|---|
${dataSourceType} | 数据源类型,如Hive-jdbc、Maxcompute |
${dbName} | 任务中数据源的库名称 |
${tableName} | 任务中数据源的表名称 |
${taskTime} | 业务日期,即具体任务执行的日期,通常情况业务业务日期与分区日期保持一致。 |
${partition} | 任务中数据源的分区值 |
${batchNum} | 任务批次号,根据业务日期tasktime及执行频率共同定义,天粒度更新批次号绝对等于1,如小时粒度执行,则根据执行顺序依次产生1-24个批次号。 |
自定义参数
注:如新增自定义参数,请您配置依赖时输入该参数。
如果用户的数据调度平台无法根据本产品提供的系统字段定位到具体实例,可以选择新增自定义参数字段,如定义任务ID。请您配置依赖时填写具体的任务ID 或名称,以便依赖接口可定位到目标参数字段。
步骤三:接口成功返回结构
API 接口调用成功时,请定义成功返回的结构:JSON结构返回{"status":"success"}或{'status":0}。
(2)测试与保存
测试按钮
注: 点击测试,测试联通后方可保存 API 依赖。该测试按钮只是测试接口调用,不会对内容检测,可输入任意内容进行测试。
保存按钮
取消按钮
点击取消,二次弹窗确认:取消后,配置或更改信息将不被保存,确认取消。
(3)后续操作
当您完成了自有调度系统的API 配置,那么就可以在可视化建模、数据集等模块的依赖配置中选择已配置好的依赖接口了。具体操作如下:
在系统管理中,点击数据连接,可以查看数据连接的任务看板,并进行任务运维操作。
在系统管理中,点击系统配置按钮,在左侧边栏中选择队列配置模块,可进行队列管理。完整介绍请您查看《队列配置》。
系统管理员在新建项目时,可以按照设定给每个项目分配指定的存储资源。在存储管理界面,可以查看资源概览信息,配置存储策略,包含开启资源管控的开关,项目资源限制配置,资源超出限制配置。此外还可以查看并搜索使用明细等。存储资源总量在部署或升级时产生或变化,如需调整请联系系统运维。