如何将ECS任务生成的test-report.xml复制到AWS Lambda的/tmp目录？

方案一：通过S3中转文件 #

这是最通用的跨服务文件传递方案，利用S3作为中间存储实现ECS任务与Lambda的文件互通：

1. 修改ECS任务的entrypoint脚本
   在entrypoint.sh末尾添加上传命令，确保JMeter执行完成后自动把报告上传到指定S3桶：

# 原有JMeter执行命令
jmeter -n -t JMeter.jmx -l test-report.xml
# 上传报告到S3，加时间戳避免文件名冲突
aws s3 cp test-report.xml s3://your-report-bucket/jmeter-reports/test-report-$(date +%Y%m%d%H%M%S).xml

同时要给ECS任务绑定的IAM角色添加s3:PutObject权限，允许向目标S3桶上传文件。

2. 更新Lambda函数逻辑
   Lambda触发ECS任务后，需要等待任务执行完成，再从S3下载文件到/tmp目录：

const AWS = require('aws-sdk');
const ecs = new AWS.ECS();
const s3 = new AWS.S3();
const fs = require('fs');
const path = require('path');

const handler = async (event, context) => {
    // 启动ECS任务（替换为你的集群、任务定义等配置）
    const runTaskRes = await ecs.runTask({
        cluster: 'your-ecs-cluster',
        taskDefinition: 'your-task-definition',
        launchType: 'FARGATE',
        networkConfiguration: {
            awsvpcConfiguration: {
                subnets: ['subnet-xxx'],
                securityGroups: ['sg-xxx'],
                assignPublicIp: 'ENABLED'
            }
        }
    }).promise();

    const taskArn = runTaskRes.tasks[0].taskArn;
    
    // 轮询等待ECS任务结束
    let taskStatus = 'RUNNING';
    while (taskStatus === 'RUNNING' || taskStatus === 'PENDING') {
        await new Promise(resolve => setTimeout(resolve, 5000));
        const taskDetails = await ecs.describeTasks({
            cluster: 'your-ecs-cluster',
            tasks: [taskArn]
        }).promise();
        taskStatus = taskDetails.tasks[0].lastStatus;
    }

    if (taskStatus === 'STOPPED') {
        // 从S3下载文件到/tmp（需替换为ECS上传的实际文件名，可通过环境变量或任务元数据传递）
        const s3Params = {
            Bucket: 'your-report-bucket',
            Key: 'jmeter-reports/test-report-20240520143000.xml'
        };
        const readStream = s3.getObject(s3Params).createReadStream();
        const writeStream = fs.createWriteStream(path.join('/tmp', 'test-report.xml'));
        
        await new Promise((resolve, reject) => {
            readStream.pipe(writeStream);
            writeStream.on('finish', resolve);
            writeStream.on('error', reject);
        });

        console.log('报告已下载到Lambda /tmp目录');
    }

    return { statusCode: 200, body: '任务执行完成' };
};

module.exports = { handler };

方案二：使用EFS共享存储 #

如果需要高频次传递文件，可通过EFS让ECS和Lambda共享同一文件系统，省去S3中转步骤：

1. 创建并配置EFS
   创建EFS文件系统，配置安全组开放NFS端口2049，允许ECS任务和Lambda所在VPC的访问。

2. 修改ECS任务定义
   添加EFS挂载配置，将容器内生成报告的目录挂载到EFS：

• 在任务定义的volumes节点添加EFS卷：

"volumes": [
    {
        "name": "jmeter-reports-efs",
        "efsVolumeConfiguration": {
            "fileSystemId": "fs-xxxxxx",
            "rootDirectory": "/jmeter-reports"
        }
    }
]

• 在容器定义的mountPoints节点挂载该卷：

"mountPoints": [
    {
        "sourceVolume": "jmeter-reports-efs",
        "containerPath": "/app", // 假设报告生成在容器的/app目录下
        "readOnly": false
    }
]

3. 配置Lambda挂载EFS
   在Lambda函数配置中添加EFS挂载：

• 选择创建好的EFS文件系统，设置本地挂载路径为/mnt/efs
• 给Lambda的IAM角色添加elasticfilesystem:ClientMount等相关权限

4. Lambda内复制文件
   任务完成后直接从EFS复制文件到/tmp：

const fs = require('fs');
const path = require('path');

const handler = async (event, context) => {
    // 触发ECS任务的逻辑...

    // 等待ECS任务完成后，从EFS复制文件到/tmp
    const sourcePath = path.join('/mnt/efs', 'jmeter-reports', 'test-report.xml');
    const destPath = path.join('/tmp', 'test-report.xml');
    
    fs.copyFileSync(sourcePath, destPath);
    console.log('报告已复制到Lambda /tmp目录');

    return { statusCode: 200, body: '任务执行完成' };
};

module.exports = { handler };

内容的提问来源于stack exchange，提问作者trung