新增配置变更功能,可以对集群节点规格实现 scale-up。### **湖仓一体分析服务 LAS**- **【新增Presto定时扩缩容功能】** - 队列中交互式分析(Presto)部分支持定时扩缩容。定时 Resize ,超过 ... **新增** **EMR** **软件** **栈** **3.1.1:** StarRocks 集群全量公开发布;新增 Phoenix 组件,版本为 5.1.3,作为 Hadoop 集群的可选组件,HBase 的必选组件;Impala、Kudu、ClickHouse、Doris、StarRocks...
Trino 组件监控指标**【更新 EMR 软件栈】**- 新增软件栈 3.2.1:Doris升级至1.2.1;Kafka升级至2.8.1;Hudi升级至0.12.2;Flink升级至1.16.0,引入StarRocks、Doris、HBase和ByteHouse Connector,支持MySQL Sink,优化多个配置,达到开箱即用;支持avro,csv,debezium-json和avro-confluent等格式;Presto、Trino优化进入客户端方式。- 新增软件栈 2.2.0:HBase集群中集成Knox组件用于访问代理,并集成了YARN和MapReduce2;Flink引擎...
Trino 组件监控指标 **【更新 EMR 软件栈】**- 新增软件栈 3.2.1:Doris升级至1.2.1;Kafka升级至2.8.1;Hudi升级至0.12.2;Flink升级至1.16.0,引入StarRocks、Doris、HBase和ByteHouse Connector,支持MySQL Sink,优化多个配置,达到开箱即用;支持avro,csv,debezium-json和avro-confluent等格式;Presto、Trino优化进入客户端方式。- 新增软件栈 2.2.0:HBase集群中集成Knox组件用于访问代理,并集成了YARN和MapRe...
新增配置变更功能,可以对集群节点规格实现 scale-up。### **湖仓一体分析服务 LAS**- **【新增Presto定时扩缩容功能】** - 队列中交互式分析(Presto)部分支持定时扩缩容。定时 Resize ,超过 ... **新增** **EMR** **软件** **栈** **3.1.1:** StarRocks 集群全量公开发布;新增 Phoenix 组件,版本为 5.1.3,作为 Hadoop 集群的可选组件,HBase 的必选组件;Impala、Kudu、ClickHouse、Doris、StarRocks ...
环境信息 系统环境版本 环境 OS veLinux(Debian 10兼容版) Python2 2.7.16 Python3 3.7.3 Java ByteOpenJDK 1.8.0_352 应用程序版本 Hadoop集群 HBase集群 Flume 1.9.0 - OpenLDAP 2.5.13 2.5.13 Ranger 1.2.0 - Z... HBase 1.6.0 1.6.0 Dolphin Scheduler 3.1.7 - Hudi 0.12.2 - Phoenix 4.16.1 4.16.1 发布说明 新增功能【组件】新增Phoenix组件,版本为4.16.1 【组件】Flink组件增加对Connector的支持,提供HBase 、JDBC、Mysql ...
环境信息 系统环境版本 环境 OS veLinux(Debian 10兼容版) Python2 2.7.16 Python3 3.7.3 Java ByteOpenJDK 1.8.0_352 应用程序版本 Hadoop集群 HBase集群 HDFS 2.10.2 2.10.2 YARN 2.10.2 2.10.2 MapReduce2 2.10... 【组件】Hive中新增 JobCommitter 功能,大幅提升存算分离场景下写数据到 TOS 的性能。 【组件】Hue组件升级至4.11.0版本。 组件版本 下面列出了 EMR 和此版本一起安装的组件。 组件 版本 描述 zookeeper_serve...
下面为您介绍用不同接入方式配置 HBase 数据源信息: 火山引擎 HBase 参数 说明 基本配置 数据源类型 HBase 接入方式 火山引擎 HBase 数据源名称 数据源的名称,可自行设置,仅支持中文,英文,数字,“_”,100个... 参数配置 ZK访问端口 客户端连接 server 的端口,即 ZK 对外服务端口。 是否为分布式部署 根据实际情况选择 HBase 是否为分布式部署。 ZK集群地址列表 ZK 服务器集群的地址列表。 ZK中HBase根路径 ZK 集群...
【组件】Hadoop集群类型、Kafka集群类型、HBase集群类型、Flink集群类型、自定义集群类型适配Kerberos,该特性属于白名单功能。 更改、增强和解决的问题【组件】Tez版本升级由0.10.1升级到0.10.2 【组件】Spark组件开箱参数优化,以及内核优化提高SQL执行性能 【组件】Hadoop组件添加Fuse模块 【组件】Proton组件由1.4.3升级到1.5.0版本 遗留的问题【组件】GPU不支持数据湖格式 组件版本 下面列出了 EMR 和此版本一起安装的组...
环境信息 系统环境版本 环境 OS veLinux(Debian 10兼容版) Python2 2.7.16 Python3 3.7.3 Java ByteOpenJDK 1.8.0_352 应用程序版本 Hadoop集群 HBase集群 Flume 1.9.0 - OpenLDAP 2.5.13 2.5.13 Ranger 1.2.0 - Z... 新增了集群监控功能模块,支持服务监控和节点监控;已有集群支持集群监控功能; 更改、增强和解决的问题【组件】Spark组件中支持对Hudi表、Iceberg表的开箱即用 【组件】Spark组件修改CloudFS的使用方式
HBase、Kafka、Presto、Trino、Ranger) 文字指标显示服务组件此刻的状态。 图表指标显示服务组件在过去一段时间内的状态,点击可切换查看信息的时间段(可选1小时,3小时,6小时,12小时,1天,3天) 各服务指标及说明HDFS指标类型 说明 容量信息 展示存储空间的整体使用量 健康度 展示集群的块损坏,副本丢失等情况,用于维护 节点信息 展示集群的节点信息 NameNode RPC 端口上的调用队列长度 显示 NameNode 的 RPC 端口调用队列长度 N...
表格数据库 HBase 版默认提供了 ZK 连接地址,同时也支持 Thrift 多语言访问,Thrift 是 HBase 标准版实例中的一种服务组件,基于 Apache Thrift(多语言支持的通信框架)开发。本文介绍基于 Java 程序通过 Thrift2 地址... 如需通过公网地址访问 HBase 实例,需确保运行 Java 工具的设备 IP 地址已加入 HBase 实例的白名单中。白名单设置方法,请参见编辑白名单。 已在 ECS 实例或本地设备上安装 Java 环境,建议使用 JDK 8 版本。更多详...
表格数据库 HBase 版默认提供了 ZK 连接地址,同时也支持 Thrift 多语言访问,Thrift 是 HBase 标准版实例中的一种服务组件,基于 Apache Thrift(多语言支持的通信框架)开发。本文介绍基于 Go 程序通过 Thrift2 地址访... 如需通过公网地址访问 HBase 实例,需确保运行 Go 程序的设备 IP 地址已加入 HBase 实例的白名单中。白名单设置方法,请参见编辑白名单。 已在 ECS 实例或本地设备上安装 Go 程序,建议使用 Go 1.20.x 及以上版本...
环境信息 系统环境版本 环境 OS veLinux(Debian 10兼容版) Python2 2.7.16 Python3 3.10.13 Java ByteOpenJDK 1.8.0_352 应用程序版本 Hadoop集群 Flink集群 Kafka集群 HBase集群 StarRocks集群 ClickHouse集群 Op... Kafka组件中支持自定义参数功能。 【组件】Trino组件中修复access-control.properties文件内容。 【组件】修复扩容节点上Tez依赖包重复上传造成Hive作业失败问题。 组件版本 下面列出了 EMR 和此版本一起安装的...