You need to enable JavaScript to run this app.
导航

StarRocks存算分离集群配置建议

最近更新时间2024.04.10 16:57:12

首次发布时间2024.04.10 16:57:12

1 选型原则

  1. FE资源

FE资源根据查询的QPS与表数量,tablet数量来决定。一般32GB可支持10万以下tablet数量。FE节点数量必须是寄数,高可用模式下需要3个或3个以上。

  1. CN资源

CN资源根据查询的QPS和查询的数据量来决定。建议1T数据量配置64Core左右的CN计算资源。

  1. 存储规格

存储分离集群存储大小仅影响查询与写入时的缓存空间大小,因此建议根据查询的数据量来决定使用的存储大小,一般16core配置256GB存储空间。

2 推荐配置

2.1 小型(32vCPU ~ 64vCPU)

类型计算规格存储规格节点数量备注

FE

8 vCPU 32GB/
16 vCPU 64GB

120GB

3

根据数据库量与表数据选用不同内存规格。tablet数量在10万以上选用64GB内存规格,以下选32GB内存规格

CN8 vCPU 32GB128GB4 ~ 8

2.2 中型(64vCPU ~ 128vCPU)

类型计算规格存储规格节点数量备注
FE16 vCPU 64GB120GB3

CN

16 vCPU 128GB

256G+

4 ~ 8

根据需要缓存的数据量设置不同的存储规格。256GB每节点可缓存256GB * 节点数的数据量。

2.3 大型(128vCPU ~ 512vCPU )

类型计算规格存储规格节点数量备注
FE16 vCPU 64GB160GB3

CN

32 vCPU 128GB

512G+

4 ~ 16

根据需要缓存的数据量设置不同的存储规格。512GB每节点可缓存512GB * 节点数的数据量。

2.4 超大型(512vCPU以上)

类型计算规格存储规格节点数量备注

FE

16 vCPU 64GB/
32 vCPU 128GB

160GB

3

查询QPS要求较高,tablet数量d在20万以上的可以选择高规格FE。

CN

32 vCPU 128GB

512G+

4 ~ 16

根据需要缓存的数据量设置不同的存储规格。512GB代表每节点可缓存512GB * 节点数的数据量。

超大型可联系火山EMR运维人员进行评估。