数据集成任务新增 PostgreSQL 数据源,支持从 LAS to PostgreSQL 的集成同步。 - 新增 MongoDB 数据源,支持 Mongo to EMR hive 通道作业。 - 扩充 PG 数据同步能力,支持 PostgreSQL to EMR hiv... HBase 的必选组件;Impala、Kudu、ClickHouse、Doris、StarRocks 等服务的核心指标接入监控和告警管理;HBase 中的表支持 Snappy 压缩;Hive,组件行为与开源保持一致,不再支持中文的表字段名;Doris,版本升级至1.1.5;H...
离线数据集成支持 Gbase8S2LAS、OceanBase2LAS、实时集成 Kafka2LAS - 数据开发支持 LAS Flink 任务类型 - 指标平台支持 HBase 数据源创建模型绑定 - 数据地图支持 GaussDB 元数据采集... 权限设置查看历史操作、按资源自动审批、审批流支持触发节点、支持批量上下载行枚举值、支持自定义问答&申请审批问答&批量设置问题、审批工单支持重新申请、新增资源包、自定义角色组,并支持应用在权限负责人、按角...
通过操作系统指标、ByteHouse 软件健康指标,查询健康指标等多维度,总结集群当前的健康度评分与改进事项- 配置下发功能优化,设置时提供配置的最佳实践参考### **云原生开源大数据平台** **E-MapReduce****【... HBase和ByteHouse Connector,支持MySQL Sink,优化多个配置,达到开箱即用;支持avro,csv,debezium-json和avro-confluent等格式;Presto、Trino优化进入客户端方式。- 新增软件栈 2.2.0:HBase集群中集成Knox组件用于...
支持引导操作与集群脚本能力。* **引擎企业级优化** :引入了 Spark、Flink 等核心引擎的企业级特性优化及安全管理。* **Stateless 云原生湖仓** :把状态外置做成存算分离的架构。* **云上便捷运维** :提供一站式... 同时集成 IAM SSO 准入认证,通常情况下用户从 EMR 管控端跳转到 Public History Server 可以实现无感 SSO 认证登录,无需再次输入用户登录凭证。**存算分离,弹性伸缩**![picture.image](https://p6-v...
独享集成资源组新增支持退订操作。 配置 ByteHouse CDW 数据源 配置 HBase 数据源 配置 Doris 数据源 配置 VeDB 数据源 配置 TLS 数据源 实时分库分表解决方案 实时整库同步解决方案 离线整库同步解决方案 独享资源组管理 2 数据开发 基于 ByteHouse CE 引擎,新增 ByteHouse CE SQL 任务 临时查询支持 ByteHouse CE SQL 临时查询任务 ByteHouse CE SQL 临时查询 3 控制台 创建项目新增支持绑定 ByteHouse CE 引擎实例 ...
HBase集群 HDFS 2.10.2 2.10.2 YARN 2.10.2 2.10.2 MapReduce2 2.10.2 2.10.2 Hive 2.3.9 - Spark 2.4.8 - Tez 0.10.1 - Knox 1.5.0 1.5.0 Openldap 2.5.13 2.5.13 Zookeeper 3.7.0 3.7.0 Ossa 1.0.0 - HBase 1.6.0 1.6.0 Flink 1.16.1 - Presto 0.280 - Trino 412 - DolphinScheduler 3.1.7 - Iceberg 1.2.0 - Hudi 0.12.2 - Airflow 2.4.2 - Hue 4.11.0 - Sqoop 1.4.7 - Impala 3.4.1 - Kudu 1.14.0 - Phoenix 4.16.1 4.16.1 R...
环境信息 系统环境版本 环境 OS veLinux(Debian 10兼容版) Python2 2.7.16 Python3 3.7.3 Java ByteOpenJDK 1.8.0_352 应用程序版本 Hadoop集群 HBase集群 Flume 1.9.0 - OpenLDAP 2.4.58 2.4.58 Ranger 1.2.0 - ZooKeeper 3.7.0 3.7.0 Flink 1.15.1 - HDFS 2.10.2 2.10.2 MapReduce2 2.10.2 - YARN 2.10.2 - Airflow 2.4.2 - Hive 2.3.9 - Hue 4.9.0 - Knox 1.5.0 - Presto 0.267 - Trino 392 - Spark 2.4.8 - Sqoop 1.4.7 - Te...
3.3.4 - 3.3.4 - - - MapReduce2 3.3.4 3.3.4 - 3.3.4 - - - YARN 3.3.4 3.3.4 - 3.3.4 - - - Airflow 2.4.2 - - - - - - Hive 3.1.3 - - - - - - Hue 4.11.0 - - - - - - Kafka - - 3.2.4 - - - - Knox 1.5.0 1.5.0 1.5.0 1.5.0 - - 1.5.0 Presto 0.280 - - - - - - Trino 412 - - - - - - Spark 3.3.3 - - - - - - Sqoop 1.4.7 - - - - - - Tez 0.10.2 - - - - - - Iceberg 1.2.0 - - - - - - Hudi 0.12.2 - - - - - - HBase 2...
3.3.4 - 3.3.4 - - - MapReduce2 3.3.4 3.3.4 - 3.3.4 - - - YARN 3.3.4 3.3.4 - 3.3.4 - - - Airflow 2.4.2 - - - - - - Hive 3.1.3 - - - - - - Hue 4.11.0 - - - - - - Kafka - - 3.2.4 - - - - Knox 1.5.0 1.5.0 1.5.0 1.5.0 - - 1.5.0 Presto 0.280 - - - - - - Trino 412 - - - - - - Spark 3.3.3 - - - - - - Sqoop 1.4.7 - - - - - - Tez 0.10.2 - - - - - - Iceberg 1.2.0 - - - - - - Hudi 0.12.2 - - - - - - HBase 2...
3.3.4 - 3.3.4 - - - MapReduce2 3.3.4 3.3.4 - 3.3.4 - - - YARN 3.3.4 3.3.4 - 3.3.4 - - - Airflow 2.4.2 - - - - - - Hive 3.1.3 - - - - - - Hue 4.11.0 - - - - - - Kafka - - 3.2.4 - - - - Knox 1.5.0 1.5.0 1.5.0 1.5.0 - - 1.5.0 Presto 0.280 - - - - - - Trino 412 - - - - - - Spark 3.3.3 - - - - - - Sqoop 1.4.7 - - - - - - Tez 0.10.2 - - - - - - Iceberg 1.2.0 - - - - - - Hudi 0.12.2 - - - - - - HBase 2...
环境信息 系统环境版本 环境 OS veLinux(Debian 10兼容版) Python2 2.7.16 Python3 3.7.3 Java ByteOpenJDK 1.8.0_352 应用程序版本 Hadoop集群 Flink集群 Kafka集群 Presto集群 Trino集群 HBase集群 OpenSearch集... 3.3.4 - - - - MapReduce2 3.3.4 3.3.4 - - - - - 3.3.4 - - - - YARN 3.3.4 3.3.4 - - - - - 3.3.4 - - - - Airflow 2.4.2 - - 2.4.2 2.4.2 - - - - - - - Hive 3.1.2 - - 3.1.2 3.1.2 - - - - - - - Hue 4.10....
HBase组件中新增ThriftServer服务。 更改、增强和解决的问题【组件】Spark组件版本由3.3.3升级为3.5.1。 【组件】StarRocks组件版本由3.1.6升级为3.2.3,支持Assume role方式访问对象存储TOS,以及访问Paimon数据。且在Spark和Flink中集成了StarRocks connector。 【组件】Hudi组件版本由0.12.2升级为0.14.1。 【组件】Iceberg组件版本由1.2.0升级为1.4.3。 【组件】Airflow组件版本由2.4.2升级为2.7.3。 【组件】DolphinSche...
环境信息 系统环境版本 环境 OS veLinux(Debian 10兼容版) Python2 2.7.16 Python3 3.7.3 Java ByteOpenJDK 1.8.0_302 应用程序版本组件 Hadoop集群 Flink集群 Kafka集群 Presto集群 Trino集群 HBase集群 OpenSear... 支持集成Hue工具。 支持OpenLDAP和Ranger的用户身份认证和权限控制。 支持读取TOS Hadoop 客户端新增读写TOS数据的能力;Hive可使用TOS作为数据存储介质。 支持多种方式访问TOS:自定义配置方式配置AK/SK、环境...