You need to enable JavaScript to run this app.
文档中心
大数据研发治理套件(私有化)

大数据研发治理套件(私有化)

复制全文
功能发布动态
V2.8.14 功能动态
复制全文
V2.8.14 功能动态

本文为您介绍大数据研发治理套件 DataLeap 产品私有化 V2.8.14 功能版本更新动态。

2025/05/08 V2.8.14

功能模块

功能描述

数据集成

  • 【新增】数据集成任务源端字段支持手动添加“函数”、“常量”字段。支持直接输入源端数据源支持的函数名称,或者直接输入常量值,支持输入'123'、'${DATE}'、'${hour}' 、'${runtime}' 等常量值或时间系统变量。
    Image
  • 【新增】离线集成任务写入 Kafka ,支持通过job.writer.key_fields:col1,col2...coln高级参数自定义指定写入 Kafka 数据记录的关键字段。可根据这些关键字段进行正确的分区、索引或其他数据相关的处理,例如,在一个订单系统中,以订单 ID 作为 Kafka message key,那属于同一个订单的所有消息都会被发送到同一个分区,方便后续对订单相关数据进行集中处理和查询。
    Image
  • 【新增】数据集成写入 FTP/SFTP 数据源,新增“文件切分条数”配置。您可依据源数据量的情况,按需设置文件切分的条数,确保每个文件中的数据量均衡,防止单个文件过大而引发异常情况。
    Image

数据开发

  • 【新增】批量操作界面新增任务“批量提交”操作功能,支持将多个任务批量提交至发布中心进行发布操作,提升任务提交发布效率。
    Image
  • 【新增】批量操作界面新增任务“批量修改队列”操作功能,支持将相同类型的集群下多个任务批量进行修改队列操作,提升任务修改效率。
    Image
  • 【新增】Apache Hadoop 集群类型,新增 Kyuubi 连接方式,Apache Hadoop HSQL 数据开发任务类型,新增支持 Kyuubi 执行引擎。
    Image
    Image

控制台

  • 【新增】Apache Hadoop 集群类型支持 Kyubbi 连接方式,以开源方式接入,Kerberos认证。连接成功后,在数据开发页面将显示Kyubbi执行引擎选项。
    Image
  • 【新增】集群管理列表增加一个集群ID的字段。
    Image
  • 【新增】当一个引擎配置两个以上集群时,即支持通过显示的删除按钮删除其中一个或者多个集群进行解绑,如下图。
    Image

数据安全

  • 【新增】在授权管理页面,支持分次选择多表后,进行一次性授权。仅支持同类引擎同类资源批量授权。
    Image
  • 支持对 LAS3 集群下的 hudi 表进行权限管理,但暂不支持安全标签、数据保护等管理。LAS3 以 Apache Hive(CDH-3.2.2 版本) 方式接。

数据质量

  • 【新增】其他数据源监控规则支持 GBase 8a 模版规则/自定义SQL规则。
    Image
最近更新时间:2025.11.05 19:03:32
这个页面对您有帮助吗?
有用
有用
无用
无用