olap
社区干货
OLAP 在火山引擎 EMR 的最佳实践
> 传统OLAP架构,解决的更多是离线分析场景的需求,随着大规模数据服务场景的增多,业务侧不断有新的诉求提出,对数据分析的时效性要求变高,当前架构中存储和计算资源耦合,不同业务、时段及用户对二者要求往往不同,导致集群响应不够及时等问题。本文重点分享OLAP在火山引擎EMR上的云原生能力及在火山相关客户中的应用实践。> 本文来源于火山引擎 EMR 团队大数据工程师琚克俭在【DataFunSummit 2023:OLAP 引擎架构峰会 - OLAP 最佳实...
OLAP进阶之“性能提升”
> 更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群在数据处理和分析的领域,提升查询效率始终是一项关键挑战。对于 OLAP 来说,性能的关键需求在于能支持实时分析,应对复杂查询,提供快速响应,并具备良好的可扩展性。这些方面,对于满足高效、准确的数据分析需求至关重要。 火山引擎正式发布《云原生数据仓库ByteHouse性能白皮书》,白皮书通过使用 SSB 100G、TPC-H 100G、TPC-DS 100G 数...
干货|开源OLAP引擎(ClickHouse、Doris、Presto、ByConity)性能对比分析
[picture.image](https://p3-volc-community-sign.byteimg.com/tos-cn-i-tlddhu82om/568b82bb96134630835eb967d9cb1869~tplv-tlddhu82om-image.image?=&rk3s=8031ce6d&x-expires=1714753248&x-signature=BM5HDmieYUWGu72vC38n5IFIw%2F4%3D) 随着数据量和数据复杂性的不断增加,越来越多的企业开始使用OLAP(联机分析处理)引擎来处理大规模数据并提供即时分析结果。在选择OLAP引擎时,性能是一个非常重要的因素。 ...
干货|解析开源OLAP引擎基于共享存储的选主方式
[picture.image](https://p3-volc-community-sign.byteimg.com/tos-cn-i-tlddhu82om/cd1bea40bcf24f6bba73e68d10a83887~tplv-tlddhu82om-image.image?=&rk3s=8031ce6d&x-expires=1714753238&x-signature=Lxa96D0%2Fg9AYCTTHAvhBhDXxWkw%3D) ByConity 是由字节跳动开源的云原生数仓,采用了存储计算分离的架构,支持主流的 OLAP 引擎优化技术,实现了租户资源隔离、弹性扩缩容,并具有数据读写的强一致性等特性。 **「基...
特惠活动
olap-优选内容
olap-相关内容
数仓进阶篇@记一次BigData-OLAP分析引擎演进思考过程 | 社区征文
## 开篇想必大家都有一个疑问?何为**OLTP**,**OLAP**?它又能够给我们带来什么?引入 | 图解那些OLAP分析引擎中的DBMS## 资讯元宇宙(Metaverse)...
干货|OLAP引擎加速:十亿级数据查询<10s广告业务实践
本篇内容将聚焦OLAP引擎技术和落地经验,从广告营销场景出发,讲解ByteHouse 加速实时人群包分析查询的技术原理。***文末可领取《云原生数据仓库ByteHouse技术白皮书》。***  由于流量红利逐渐消退,精细化营销逐渐成为新趋势。在数据平台建设中,不少企业开始引入OLAP引擎以实现广告业务的精准投放。 本篇聚焦ByteHouse技术和落地经验,以字节跳动...
产品架构
本文为您介绍EMR Serverless OLAP的产品架构。 1 产品架构 OLAP引擎:100%开源兼容,提供Doris、StarRocks全托管服务。覆盖即席查询、实时分析、实时统计、数据湖分析等领域。 管控平台:支持实例创建、实例管理、诊断优化、弹性伸缩、用户管理等一站式运维能力。 数据湖分析:EMR Serverless OLAP 不仅能分析本地存储的数据,也可以作为计算引擎直接分析数据湖中的数据,支持包括 Apache Hive、Apache Iceberg、Apache Hudi、Apache...
干货 | 字节跳动基于开源 OLAP 引擎的探索与实践
> 23年8月16日~18日,由IT168联合旗下 ITPUB、ChinaUnix 两大技术社区主办的第14届中国数据库技术大会(DTCC2023)在北京国际会议中心隆重召开。火山引擎开源大数据平台 EMR 技术专家杜军令受邀参加【数据湖与实时数仓技术应用实践】专场,并进行了名为《字节基于开源 OLAP 引擎的探索与实践》主题分享。本文总结了此次分享的关键内容和分享材料。目前 OLAP 引擎在用户的报表分析,用户行为分析,市场预测与决策支持,用户画像与推荐等...
发布|火山引擎发布ByteHouse性能白皮书,揭秘OLAP性能突破的关键技术(内附下载链接)
作为一款OLAP引擎,伴随字节跳动各业务的发展,ByteHouse已经过数百个应用场景和数万用户锤炼,在2022年3月部署规模已超过1万8000台,最大的集群规模在 2400 余个节点,管理总数据量超过700PB,并逐步在外部金融、泛互等场景应用和推广。为了更好支持字节内外部大规模数据和复杂场景应用,性能一直以来是ByteHouse重点打磨的产品基本功。 SSB、TPC-H 和 TPC-DS 是常用于测试分析型数据库/数据仓库的数据集。在白皮书中,通过使用...
