2.4.2 - - - - - Hive 3.1.3 - - 3.1.3 3.1.3 - - - - - Hue 4.10.0 - - 4.10.0 4.10.0 - - - - - Kafka - - 2.8.1 - - - - - - - Knox 1.5.0 1.5.0 1.5.0 1.5.0 1.5.0 1.5.0 1.5.0 - - - Presto 0.280 - - 0.280 - - - - - - Trino 412 - - - 412 - - - - - Spark 3.2.1 - - - - - - - - - Sqoop 1.4.7 - - - - - - - - - Tez 0.10.1 - - - - - - - - - Iceberg 1.2.0 - - - - - - - - - Hudi 0.12.2 - - - - - - - - - HBase 2...
2.10.2 - YARN 2.10.2 - Airflow 2.4.2 - Hive 2.3.9 - Hue 4.9.0 - Knox 1.5.0 - Presto 0.267 - Trino 392 - Spark 2.4.8 - Sqoop 1.4.7 - Tez 0.10.1 - Iceberg 0.14.0 - Impala 3.4.1 - Kudu 1.14.0 - HBase 1... HBase集群中集成Knox组件用于访问代理;并集成了YARN和MapReduce2; 【组件】Flink引擎支持avro,csv,debezium-json和avro-confluent等格式; 【组件】修复Presto写入TOS的潜在问题; 【组件】Hive适配CFS, 支持外部...
HDFS 2.10.2 MapReduce2 2.10.2 YARN 2.10.2 Airflow 2.4.2 Hive 2.3.9 Hue 4.9.0 Knox 1.5.0 Presto 0.267 Trino 365 Spark 2.4.8 Sqoop 1.4.7 Tez 0.10.1 Iceberg 0.12.0 Impala 3.4.1 Kudu 1.14.0 HBase 1.7.2 ... 云监控中尚未适配 2.x 集群。 组件版本 下面列出了 EMR 和此版本一起安装的组件。 组件 版本 描述 zookeeper_server 3.7.0 用于维护配置信息、命名、提供分布式同步的集中式服务。 zookeeper_client 3.7.0 ZooKeep...
2.10.2 - YARN 2.10.2 - Airflow 2.4.2 - Hive 2.3.9 - Hue 4.9.0 - Knox 1.5.0 - Presto 0.267 - Trino 392 - Spark 2.4.8 - Sqoop 1.4.7 - Tez 0.10.1 - Iceberg 0.14.0 - Impala 3.4.1 - Kudu 1.14.0 - HBase 1... Ossa组件在Hadoop集群中变为必选组件,用于支持作业管理等功能; 【通用】在Ranger中默认为系统用户配置HDFS等资源的权限。 已知问题在Hadoop集群同时安装了Iceberg和Hudi组件,使用Flink SQL连接Iceberg创建Catalo...
HBase组件中新增ThriftServer服务。 更改、增强和解决的问题【组件】Spark组件版本由3.3.3升级为3.5.1。 【组件】StarRocks组件版本由3.1.6升级为3.2.3,支持Assume role方式访问对象存储TOS,以及访问Paimon数据。... Hive 中新增 JobCommitter 功能,大幅提升存算分离场景下写数据到 TOS 的性能。 【组件】Hue 组件升级至 4.11.0 版本。 EMR-2.4.0 版本说明 2023年8月EMR 2023年8月22日更新上线,重点功能更新如下: EMR 平台功...
环境信息 系统环境版本 环境 OS veLinux(Debian 10兼容版) Python2 2.7.16 Python3 3.7.3 Java ByteOpenJDK 1.8.0_352 应用程序版本 Hadoop集群 HBase集群 Flume 1.9.0 - OpenLDAP 2.5.13 2.5.13 Ranger 1.2.0 - ZooKeeper 3.7.0 3.7.0 Flink 1.15.1 - HDFS 2.10.2 2.10.2 MapReduce2 2.10.2 - YARN 2.10.2 - Airflow 2.4.2 - Hive 2.3.9 - Hue 4.10.0 - Knox 1.5.0 - Presto 0.280 - Trino 412 - Spark 2.4.8 - Sqoop 1.4.7 - T...
HBase 1.6.0 1.6.0 Flink 1.16.1 - Presto 0.280 - Trino 412 - DolphinScheduler 3.1.7 - Iceberg 1.2.0 - Hudi 0.12.2 - Airflow 2.4.2 - Hue 4.11.0 - Sqoop 1.4.7 - Impala 3.4.1 - Kudu 1.14.0 - Phoenix 4.16.1 4.16.1 Ranger 1.2.0 - Flume 1.9.0 - 发布说明 更改、增强和解决的问题【组件】优化Hive on Tez的任务启动流程,加载本地jar到ClassPath,替换从HDFS下载。 【组件】Hive中新增 JobCommitter 功能,大幅提升存算分...
Airflow 2.4.2 - - - 2.4.2 2.4.2 - - - Hive 3.1.3 - - - 3.1.3 3.1.3 - - - Hue 4.11.0 - - - 4.11.0 4.11.0 - - - Kafka - - 3.2.4 - - - - - - Knox 1.5.0 1.5.0 1.5.0 - 1.5.0 1.5.0 1.5.0 - - Presto 0.280 - - - 0.280 - - - - Trino 412 - - - - 412 - - - Spark 3.3.3 - - - - - - - - Sqoop 1.4.7 - - - - - - - - Tez 0.10.1 - - - - - - - - Iceberg 1.2.0 - - - - - - - - Hudi 0.12.2 - - - - - - - - HBase 2...
环境信息 系统环境版本 环境 OS veLinux(Debian 10兼容版) Python2 2.7.16 Python3 3.7.3 Java ByteOpenJDK 1.8.0_352 应用程序版本 Hadoop集群 Flink集群 Kafka集群 Presto集群 Trino集群 HBase集群 OpenSearch集... 3.3.4 - - - - MapReduce2 3.3.4 3.3.4 - - - - - 3.3.4 - - - - YARN 3.3.4 3.3.4 - - - - - 3.3.4 - - - - Airflow 2.4.2 - - 2.4.2 2.4.2 - - - - - - - Hive 3.1.2 - - 3.1.2 3.1.2 - - - - - - - Hue 4.10....