You need to enable JavaScript to run this app.
文档中心
E-MapReduce

E-MapReduce

复制全文
下载 pdf
产品动态
EMR on ECS 动态(2026年)
复制全文
下载 pdf
EMR on ECS 动态(2026年)

本文介绍火山引擎 E-MapReduce(EMR)各版本功能发布和文档动态,新特性将在各个地域陆续发布,欢迎体验。

2026年05月

EMR 2026 年 05月14日 EMR on ECS 管控平台在各个地域陆续发布 1.26.0 版本,重点功能更新如下。

  • EMR 平台功能更新

    功能名称

    功能描述

    发布地域

    集群弹性伸缩

    弹性伸缩功能更新,新增/完善了弹性伸缩规则,您可结合业务场景灵活设置集群的弹性伸缩规则。

    • 按队列维度负载伸缩:负载伸缩规则支持按 YARN 队列维度的资源指标触发弹性伸缩,支持选择 子队列(如支持 root.default、root.production 等子队列),实现更精细的资源调度控制。
      Image
    • 伸缩规则重试时间:新增重试时间配置,在设置的重试时间内,EMR每隔30秒尝试执行一次,直到满足条件时执行伸缩动作。
      Image
    • 编辑/删除规则限制:生效中的规则自动禁用编辑和删除操作,防止误改正在运行的伸缩策略。
      Image
    • 资源池标签:支持为扩容节点自动打资源池标签,确保新扩容节点自动归入指定资源池,无需手动配置。
      Image

    更多弹性伸缩操作指导请参见弹性伸缩

    华南、柔佛、华北、华东、中国香港

    集群监控

    集群监控>Node页面,新增节点级 CPU、内存、磁盘等负载指标监控图表,支持按时间段筛选查看。

    • Overview 页面支持按时间段筛选,查看节点负载指标 Top N 图表。
      Image
    • Node 页面支持按时间段筛选,查看单个或多个节点的负载指标图表,单次最多展示 100 个节点。
      Image

    更多Node监控指标请参见Node监控指标

    华南、柔佛、华北、华东、中国香港

    Celeborn 服务监控能力优化,新增支持在服务监控页面、集群服务节点列表中展示异常 worker 信息:

    • 当存在 异常 Worker 节点时,在服务监控页面会直接展示异常信息,支持一键跳转至服务列表 > Celeborn > 部署拓扑页面,展示Celeborn Worker列表,快速定位异常节点。
      Image
    • 跳转至 Celeborn Worker 列表页面后,您可查看异常原因描述。
      Image

    华南、柔佛、华北、华东、中国香港

    集群节点组

    新增支持 Gateway 类型的节点组。GateWay 节点组可添加并纳管的其他节点,可自动化更新客户端组件、同步EMR集群配置,可满足修改配置、新增开发机等场景下,快速变更、配置开发机参数的需求。
    Image

    • 仅支持 Hadoop 集群。
    • 仅 EMR 3.x 版本大于等于 EMR-3.5.0,EMR 2.x 版本大于等于EMR-2.4.0支持。

    更多节点组详情请参见节点组管理

    华南、柔佛、华北、华东、中国香港

    组件拓扑管理

    组件服务批量操作体验提升,支持按服务状态一键勾选节点,支持按"运行中"、"已停止"、"已下线"和"异常"四种状态快速筛选。
    Image

    华南、柔佛、华北、华东、中国香港

    管理服务配置参数

    支持对自定义参数配置加密属性。开启后,参数在数据库中加密存储、在控制台页面中脱敏展示,同时在集群节点的配置文件中自动解密为正确值,保障密钥等敏感信息全链路安全。
    Image
    更多管理服务配置参数操作指导请参见管理服务配置参数

    华南、柔佛、华北、华东、中国香港

    EMR AI 助手

    新增支持诊断 EMR on ECS 的 pyspark 作业。
    更多 EMR AI 助手的使用请参见:EMR AI 助手快速入门

    华南、柔佛、华北、华东、中国香港

  • EMR 软件栈更新

    软件栈版本

    功能描述

    发布地域

    软件栈 EMR-V3.22.0

    与 EMR on ECS 相关的软件栈V3.22.0版本的新功能如下。软件栈版本的全量动态说明请参见:EMR-3.20.0发布说明

    • Proton
    • Spark
      • Spark 组件新增支持对 3.0 版本的 Lance 格式的数据进行读写操作。

    华南、柔佛、华北、华东、中国香港

2026年03月

EMR 2026年03月12日 EMR on ECS 管控平台发布1.25.0版本,重点功能更新如下。

  • EMR 平台功能更新

    功能名称

    功能描述

    发布地域

    集群配置

    • 新增支持修改 Hadoop 集群/自定义集群的安全组配置。
      Image
    • 集群新增支持直接查看并跳转至元数据链接实例。
      Image
    • 设置集群弹性伸缩节点时,新增支持同步设置弹性伸缩节点的可用区及网络配置。
      Image
    • 修改集群的服务参数时,对于需要同步修改多个节点的服务参数,新增支持批量修改多节点的功能,提高服务参数修改操作效率。
      Image

    华南、柔佛、华北、华东、中国香港

    • 新建集群时,集群的 Hive 根路径新增支持选择“TOS 加速器”,支持基于 TOS 单区域接入点访问 TOS 加速器。
      如果您已在 TOS 上创建了加速器,您也可选择对应 TOS 加速器的路径作为 Hive 根路径,以满足低延迟、快速响应、高吞吐量的数据传输场景要求,
      Image
      TOS 加速器的介绍请参见:TOS 加速器概述。更多关于创建集群的参数说明请参见:创建集群概述(3.19.0及之后版本)
    • 华北2(北京)
    • 华南1(深圳)

    服务组件

    服务组件被修改后,重启服务组件时,支持多种重启方式:重启、强制重启、自行重启,选择重启/强制重启时,新增支持配置“滚动重启”开关。
    Image

    • 强制重启将立即重启目标进程,执行清理不会保存数据,不建议对正常运行的服务进程进行该操作。
    • 打开滚动重启开关后,后续服务重启时,滚动重启不会停止整个服务组件,EMR将按照一定顺序逐个重启服务组件,整体重启时间相比于直接重启更长,但不会停止所有服务。

    当前HDFS 、YARN、Presto、Spark组件支持此功能,更多关于服务重启的说明请参见添加/重启服务

    华南、柔佛、华北、华东、中国香港

    欠费逻辑

    包年包月类型的EMR on ECS 集群资源欠费逻辑与 ECS 保持一致,在到期日至次日中午12点可正常使用,12点后自动停服,停服期间正常计收。保留期15天。更多欠费逻辑的说明请参见:欠费说明

    华南、柔佛、华北、华东、中国香港

  • EMR 软件栈更新

    功能名称

    功能描述

    发布地域

    DolphinScheduler

    新增支持向下游节点输出 DolphinScheduler Serverless任务的JobID,便于基于JobID 对 Serverless 任务做一些信息收集,方便做数据关联(升级为血缘),更多输出 Serverless 任务JobID的操作指导请参见:Dolphin Serverless 任务输出 JobID

    华南、柔佛、华北、华东、中国香港

2026年01月

EMR 2026年01月15日 EMR on ECS 管控平台发布1.24.0版本,同时软件栈发布3.20.0版本,重点功能更新如下。

  • EMR 平台功能更新

    功能名称

    功能描述

    发布地域

    集群元数据

    创建 Presto、Trino 集群时,集群的 Hive 服务的元数据新增支持选择 LAS Catalog。
    Image
    LAS Catalog 为您提供全托管、免运维、高可用、高性能的统一元数据服务,同时适用于测试和生产场景,将Hive 服务的元数据选择为 LAS Catalog 后,可基于 LAS Catalog 实现多服务元数据的统一管理。

    注意

    • 当前仅 Hive 服务和EMR 3.11.3及以上版本支持选择LAS Catalog。
    • 仅支持选择同地域下创建好的 LAS Catalog。如果没有可选的LAS Catalog,您可单击页面的”创建Catalog“,前往LAS Catalog页面进行创建。

    华南、柔佛、华北、华东、中国香港

    磁盘挂载

    优化 EMR on ECS 的磁盘挂载上限,与底层 ECS 规格本身支持挂载的上限一致。
    Image
    如上图所示,,当创建集群或修改扩容集群时,每个集群实例支持挂载的数据盘数量上限与当前所选的ECS规格可挂载的数据盘上限一致

    服务参数

    界面优化,HDFS、MapReduce、Spark、Hive、YARN、ZOOKEEPER、kyuubi 服务在服务参数页面新增展示服务参数描述,您可在界面便捷的查看、了解各个服务参数的含义。
    Image

  • EMR 软件栈更新

    软件栈版本

    功能描述

    发布地域

    软件栈 EMR-V3.20.0

    与 EMR on ECS 相关的软件栈V3.20.0版本的新功能如下。软件栈版本的全量动态说明请参见:EMR-3.20.0发布说明

    • Proton
      • Proton组件由2.3.8版本升级至2.3.10,新增支持了Flink 2.2,详情请参见Proton 发行版本
    • DolphinScheduler
      • DolphinScheduler的Serverless 作业插件新增支持自定义参数,更多DolphinScheduler的Serverless 作业插件的介绍和使用指导请参见使用作业插件(Task Plugin)
    • Presto
      • 【Presto】支持客户配置引擎参数,支持监控指标。

    华南、柔佛、华北、华东、中国香港

最近更新时间:2026.05.14 20:26:03
这个页面对您有帮助吗?
有用
有用
无用
无用