Serverless 队列
资源配额
- 独占队列的弹性部分不得超过 MAX(100% 固定 CU 数,256 CU)。
- 公共队列默认上限为 1000 CU,如需更高配额,可通过 提工单 的方式,联系火山引擎技术支持人员申请。
- 使用 GPU 资源,可通过 提工单 的方式,联系火山引擎技术支持人员申请。
查询性能
- 单租户默认支持最多 200 并发任务,如需更多并发,可通过 提工单 的方式,联系火山引擎技术支持人员申请。
弹性扩缩容
- 公共队列与带弹性资源的独占队列,在高并发或资源紧张场景下无法保证资源申请成功,且可能导致任务在等待资源期间运行慢。
- 对于有强资源保障需求的场景,建议采用独占队列的固定资源。
Shuffle 作业
- 队列默认使用共享 Shuffle 资源池,单作业最大 Shuffle 数据量为 1000 TB。
- 高峰期容量不足可能导致作业延迟或失败。重度 Shuffle 场景建议使用独立 Shuffle 集群,如需使用请通过 提工单 的方式,联系火山引擎技术支持人员申请。
小文件合并与清理
- EMR Serverless 仅提供计算能力,不会自动合并小文件或清理过期文件。
- 用户需主动合并与清理数据,若未处理,易产生碎片和冗余,增加元数据及 IO 开销,进而导致查询延迟、成本上升。
地域与可用区限制
服务覆盖范围有限,仅在如下指定可用区提供服务。
- 华北2(北京)
- 华东2(上海)
- 华南1(广州)
- 亚太东南(柔佛)
- 华北2(北京)自动驾驶云
- 华北2(北京)自动驾驶云 2
- 华东2(上海)自动驾驶云
Serverless 实例
参数配置
禁止直接连接实例使用 set 命令修改集群参数,实例重启后,管控页面的参数配置会覆盖该参数;若需修改,请登录 EMR 控制台,通过实例参数功能操作。
产品服务
地域与可用区限制:服务覆盖范围有限,仅在如下指定可用区提供服务。
- 华北2(北京)
- 华东2(上海)
- 华南1(广州)
- 亚太东南(柔佛)
- 华东2(上海)自动驾驶云