You need to enable JavaScript to run this app.
导航

EMR 1.1.0版本说明

最近更新时间2023.01.19 11:40:44

首次发布时间2022.04.02 16:36:05

环境信息

系统环境

版本环境
OSDebian 9.13
Python22.7.13
Python33.5.3
Java1.8.0_312

应用程序版本

组件Hadoop集群Flink集群Kafka集群
Flume1.9.01.9.01.9.0
OpenLDAP2.4.582.4.582.4.58
Ranger2.1.02.1.02.1.0
ZooKeeper3.5.73.5.73.5.7
Flink1.111.11-
HDFS3.3.13.3.1-
MapReduce23.3.13.3.1-
YARN3.3.13.3.1-
Airflow2.2.0--
Hive3.1.2--
Hue4.9.0--
Kafka---
Knox1.5.0--
Presto0.260.1--
Presto on YARN0.260.1--
Spark3.2.1--
Sqoop1.4.7--
发布说明

以下发布说明包括有关EMR 1.1.0的信息, 更改与1.0.0有关。
首次发布日期:2022年1月11号

新功能

  • 新增EMR集群包年包月的付费方式,IDC用户和大集群混部用户更习惯包年包月的使用方式,该种形态在日常负载长时间保持在80%情况下,较按量付费更具成本优势。
  • EMR软件栈新增1.1软件版本,新增EMR Stream集群类型,新增Kafka、Flink组件,大数据流式计算场景,可以使用独立的Kafka、Flink集群进行数据实时分析。
  • EMR支持的ECS实例规格组更新,新增计算型C系列、内存型R系列大数据型D系列等多种实例规格族,丰富了集群节点的类型,用户可以更加灵活的选择测试集群配置,比如大规模HDFS建议使用D系列降低成本。
  • 增加集群服务监控模块,客户大数据OP团队便于监控集群和开源组件服务的关键性能指标。
  • 增加集群操作日志和服务日志模块,便于客户大数据OP团队和开发团队对集群操作和集群开源组件的操作进行审计。
  • 新增组件自定义配置参数配置,大数据OP可以自助参考开源组件文档添加参数,更加灵活。
  • 支持HDFS、YARN HA(高可用)模式,在Master节点的一台服务挂掉时,可以保证服务连续性,不受影响,是用户上到生产环境的必备能力。