Lambda连接Redshift Serverless时遭遇ValidationException问题求助

问题核心 #

你遇到的矛盾点：

• 服务端要求调用batch_execute_statement必须指定ClusterIdentifier或WorkgroupName
• 但你使用的boto3 1.20.32版本中，batch_execute_statement接口不支持WorkgroupName参数，传参就会触发客户端参数验证错误

可行解决方案 #

方案1：绕过客户端参数验证直接调用API #

旧版botocore的参数验证是客户端侧逻辑，你可以直接调用底层_make_api_call方法，绕过验证传递WorkgroupName参数：

print('boto3 version: ' + boto3.__version__)
redshift = boto3.client('redshift-data')

def lambda_handler(event, context):
    print('Preparing query')

    # 直接构造API请求参数，包含WorkgroupName
    response = redshift._make_api_call(
        'BatchExecuteStatement',
        {
            'Database': 'dev',
            'Sqls': ['<<SQL QUERY>>'],
            'StatementName': 'get view',
            'WorkgroupName': '你的无服务器工作组名称'
        }
    )
    print('Query executed', response)

方案2：使用SecretArn关联工作组信息 #

如果你的Redshift Serverless数据库凭证存储在AWS Secrets Manager中，且Secret包含workgroup_name字段，可以通过指定SecretArn替代显式传递WorkgroupName：

print('boto3 version: ' + boto3.__version__)
redshift = boto3.client('redshift-data')

def lambda_handler(event, context):
    print('Preparing query')

    response = redshift.batch_execute_statement(
        Database='dev',
        Sqls=['<<SQL QUERY>>'],
        StatementName='get view',
        SecretArn='arn:aws:secretsmanager:区域:账号:secret:你的凭证名称'
    )
    print('Query executed', response)

注意：Secret结构需符合Redshift Data API要求，需包含dbUser、password、engine、workgroup_name等字段

方案3：升级boto3/botocore版本 #

最彻底的解决方式是升级到支持WorkgroupName参数的版本（boto3 >= 1.21.0，对应botocore >= 1.24.0），升级后可直接在batch_execute_statement中指定参数：

print('boto3 version: ' + boto3.__version__)
redshift = boto3.client('redshift-data')

def lambda_handler(event, context):
    print('Preparing query')

    response = redshift.batch_execute_statement(
        Database='dev',
        Sqls=['<<SQL QUERY>>'],
        StatementName='get view',
        WorkgroupName='你的无服务器工作组名称'
    )
    print('Query executed', response)

原因解释 #

在boto3 1.20.x版本阶段，Redshift Serverless刚推出不久，redshift-data客户端的batch_execute_statement接口还未同步添加WorkgroupName参数，但AWS服务端已提前更新API规则，要求必须指定集群或工作组标识，由此引发客户端验证与服务端要求的矛盾。

内容的提问来源于stack exchange，提问作者IamAshay