产品架构
最近更新时间：2024.03.05 11:39:31
首次发布时间：2023.12.15 14:34:20
本文为您介绍EMR Serverless OLAP的产品架构。
1 产品架构
OLAP引擎：100%开源兼容，提供Doris、StarRocks全托管服务。覆盖即席查询、实时分析、实时统计、数据湖分析等领域。
管控平台：支持实例创建、实例管理、诊断优化、弹性伸缩、用户管理等一站式运维能力。
数据湖分析：EMR Serverless OLAP 不仅能分析本地存储的数据，也可以作为计算引擎直接分析数据湖中的数据，支持包括 Apache Hive、Apache Iceberg、Apache Hudi、Apache Paimon 等数据组织结构，支持 Parquet、ORC、CSV 等文件格式，也支持 HDFS、S3、TOS 等存储方式。
实时分析：EMR Serverless OLAP 能很好地支持实时数据分析，并能实现对实时更新数据的高效查询。StarRocks 还支持现代化物化视图，进一步加速查询。
2 产品优势
| 优势 | 说明 |
|---|---|
| 全托管服务 | 提供开源 StarRocks、Doris 的全托管服务，用户专注业务开发，无需关注基础设施维护。 |
| 开放生态 | 兼容 MySQL 协议，支持标准 SQL 语法，无缝对接主流BI和SQL开发框架。基于火山引擎大数据开发套件(Dataleap)和全域数据集成（Datasail)可快速完成一站式大数据平台建设，支持数据开发、调度、集成和元数据管理。 |
| 智能诊断 | 提供实例和SQL诊断和优化建议，用户可自助分析复杂性能问题，效率大幅提升。 |
| 数据湖查询加速 | 支持对数据湖中的数据进行分析，支持包括 Apache Hive、Apache Iceberg、Apache Hudi、Apache Paimon 等数据组织结构，支持 Parquet、ORC、CSV 等文件格式，支持 HDFS、S3、TOS 等存储方式。和上一代开源引擎相比，性能有数倍提升。 |
| 计算存储分离架构 | 相比于存算一体的多副本、数据冗余的存储方式，存算分离架构使用 TOS 作为数据存储，具有容量大、可靠性高、成本低等优点，进一步提升了数据分析平台的性价比。另一方面计算资源与存储解耦，用户根据自身业务需求灵活调配计算资源，真正实现了高性能计算和低成本存储。 |