You need to enable JavaScript to run this app.
文档中心
大数据研发治理套件(私有化)

大数据研发治理套件(私有化)

复制全文
功能发布动态
V2.8.16 功能动态
复制全文
V2.8.16 功能动态

本文为您介绍大数据研发治理套件 DataLeap 产品私有化 V2.8.16 功能版本更新动态。

2025/06/30 V2.8.16

功能模块

功能描述

任务运维

  • 【优化】在离线任务监控规则的报警设置中,新增任务监控范围指定功能。您可根据实际业务情况来指定任务实例的监控范围,避免无效告警,提升告警处理效率。
    Image

数据开发

  • 【新增】临时查询新增支持 DataOps 流水线管理能力。通过配置流水线,实现临时查询时 SQL 规范扫描(CodeCT)、人工 Review 等调试检查工作,实现持续、高效的数据查询。
    Image
    Image
  • 【优化】Spark 引擎任务设定优先级参数,该优先级参数会传递给 Yarn 资源调度系统,以实现精细化资源控制,从而在实际业务场景中分配任务优先级,提升任务执行效率。调度设置中优先级数字越大(D5),则在 Yarn 中的优先级越低,spark.yarn.priority 值范围在 0(最低)~10(最高)。
    Image
  • 【优化】Apache Hadoop 集群下的 Spark、HSQL 任务类型优化执行日志详情展现,支持用户在执行日志中查看引擎中的 JobManager、Driver 日志,方便用户排查问题。
    Image

数据集成

  • 【新增】离线整库同步解决方案新增自定义任务名称配置,支持通过引用参数变量的方式来自定义配置解决方案生成的任务名称,便于您后期可依据自定义的任务名称快速查找任务进行维护。
    Image
  • 【优化】通过 JDBC Connector 方式连接并读取的数据源(如 MySQL、PostgreSQL、SQLServer 等),支持指定高级参数:job.reader.shard_split_mode=quickjob.reader.use_sqoop_string_split_mode=true,来指定 String 数据类型的分片算法为 Sqoop 算法,从而提升数据读取性能。
    Image
  • 【优化】离线数据集成任务在调度设置-基本信息中,支持设定任务优先级参数,等级数字越小,代表优先级等级越高。该优先级参数会传递给 Yarn 资源调度系统,以实现精细化资源控制,从而在实际业务场景中分配任务优先级,提升任务执行效率。
    Image
  • 【优化】写入FTP/SFTP数据源时,对任务标记完成文件中生成的文件内容进行了优化。文件内容将包含任务同步的字段名称信息、FTP/SFTP 文件名等信息,以提高标记文件的可读性。
    Image
  • 【新增】Hive 数据源,新增支持读取和写入 Hudi COW、Hudi MOR 表存储类型,以支持 Hudi 表的数据同步能力。
    Image
  • 【优化】优化数据同步解决方案入口,支持在任务开发界面新建任务时,进入数据同步解决方案界面。
    Image

数据服务

  • 【新增】数据服务 API 开发时,在高级配置中新增保留调用日志选项能力。开启此功能平台将记录详细的 API 调用信息,便于后续问题排查和调试。
    Image

控制台

  • 【新增】支持选择是否开启某个项目下的任务开发类型。勾选开启后,才可在该项目的任务开发页面新建相应类型的任务。
    Image
  • 【新增】智能市场新增 SQL规范扫描工具 CodeCT,支持大盘查看、配置规则、成员管理等功能。
    Image
  • 【新增】流水线配置支持临时查询触发类型。
    Image
  • 【新增】流水线支持配置 CodeCT 触发节点。
    Image
  • 【优化】解决了流水线消息通知无法发送到用户邮箱的问题。
    Image

数据地图

  • 【优化】解决了新建业务线时,数据层级刷新报错的问题。
    Image

【删除】删除管理中心 > 配置管理功能,包括业务域、主题、产品线、专题等信息的配置。

数据质量

  • 【优化】对配置项目下数据监控规则进行了权限控制,仅项目相关成员有配置权限。
    Image

数据治理

  • 【改版&新增】由旧版的 SLA 治理改版为新版的数据治理,功能主要包括工作台、治理全景、SLA保障、资源优化、复盘管理五部分。
    Image
最近更新时间:2025.11.05 19:03:32
这个页面对您有帮助吗?
有用
有用
无用
无用