如何通过Python boto3调用指定DPU数量的AWS Glue Job

首先明确：无法通过调用Glue相关的boto3接口直接提升账号的DPU配额，你在调用start_job_run接口时传入的DPU数值，只能在当前账号对应区域已生效的Glue DPU配额上限、以及Job本身配置的DPU上限二者的最小值范围内生效，超出范围的参数会被直接拒绝。

相关规则和操作说明如下：

• Glue的DPU属于AWS账号级别的服务配额，所有配额调整操作都需要走服务配额申请流程，和Glue Job的触发逻辑完全独立
• 如果你需要自动化提交配额提升申请，可以调用boto3的服务配额客户端接口完成，示例代码如下：

import boto3

sq_client = boto3.client('service-quotas')
# 提交Glue DPU配额提升申请
resp = sq_client.request_service_quota_increase(
    ServiceCode='glue',
    QuotaCode='L-6E174E80', # 标准DPU配额的编码，按需替换为对应类型的配额编码
    DesiredValue=50 # 替换为你期望申请的配额值
)

• 配额提升申请提交后需要等待AWS官方审核，审核通过后配额才会生效，此时你再通过boto3触发Glue Job时就可以传入更高的DPU数值了

内容的提问来源于stack exchange，提问作者rroxic