You need to enable JavaScript to run this app.
导航
产品架构
最近更新时间:2024.03.05 11:39:31首次发布时间:2023.12.15 14:34:20

本文为您介绍EMR Serverless OLAP的产品架构。

1 产品架构

  • OLAP引擎:100%开源兼容,提供Doris、StarRocks全托管服务。覆盖即席查询、实时分析、实时统计、数据湖分析等领域。

  • 管控平台:支持实例创建、实例管理、诊断优化、弹性伸缩、用户管理等一站式运维能力。

  • 数据湖分析:EMR Serverless OLAP 不仅能分析本地存储的数据,也可以作为计算引擎直接分析数据湖中的数据,支持包括 Apache Hive、Apache Iceberg、Apache Hudi、Apache Paimon 等数据组织结构,支持 Parquet、ORC、CSV 等文件格式,也支持 HDFS、S3、TOS 等存储方式。

  • 实时分析:EMR Serverless OLAP 能很好地支持实时数据分析,并能实现对实时更新数据的高效查询。StarRocks 还支持现代化物化视图,进一步加速查询。

2 产品优势

优势说明
全托管服务提供开源 StarRocks、Doris 的全托管服务,用户专注业务开发,无需关注基础设施维护。
开放生态兼容 MySQL 协议,支持标准 SQL 语法,无缝对接主流BI和SQL开发框架。基于火山引擎大数据开发套件(Dataleap)和全域数据集成(Datasail)可快速完成一站式大数据平台建设,支持数据开发、调度、集成和元数据管理。
智能诊断提供实例和SQL诊断和优化建议,用户可自助分析复杂性能问题,效率大幅提升。
数据湖查询加速支持对数据湖中的数据进行分析,支持包括 Apache Hive、Apache Iceberg、Apache Hudi、Apache Paimon 等数据组织结构,支持 Parquet、ORC、CSV 等文件格式,支持 HDFS、S3、TOS 等存储方式。和上一代开源引擎相比,性能有数倍提升。
计算存储分离架构相比于存算一体的多副本、数据冗余的存储方式,存算分离架构使用 TOS 作为数据存储,具有容量大、可靠性高、成本低等优点,进一步提升了数据分析平台的性价比。另一方面计算资源与存储解耦,用户根据自身业务需求灵活调配计算资源,真正实现了高性能计算和低成本存储。