AWS Lambda容器化网页爬取报错：Chrome服务意外退出（状态码-5）

核心排查与修复方向 #

1. 补充Chrome系统依赖 #

Lambda容器基于精简版Amazon Linux，Chrome运行需要的基础库大概率缺失，状态码-5常与此相关。

• 在Dockerfile中添加依赖安装命令：

  RUN yum install -y glibc libnss3 libgconf-2-4 libX11 libXext libXrender libXtst
  

2. 修正Chrome启动参数 #

无头模式下的Chrome必须适配Lambda的资源限制，参数错误会直接导致崩溃。确保lambda_function.py中配置以下关键参数：

options = webdriver.ChromeOptions()
options.add_argument('--headless=new')
options.add_argument('--no-sandbox')
options.add_argument('--disable-dev-shm-usage')  # 禁用极小的/dev/shm空间，改用磁盘
options.add_argument('--disable-gpu')
options.add_argument('--window-size=1920x1080')
options.add_argument('--single-process')

3. 提升资源配额 #

512MB内存可能无法支撑Chrome渲染网页，Lambda的CPU资源与内存正相关，内存越高CPU配额越多：

• 尝试将内存调整至1024MB，超时延长至3分钟后重新测试。

4. 确保Chrome与ChromeDriver版本严格匹配 #

版本不一致会直接导致启动失败，检查Dockerfile中两者的下载版本是否完全一致：

# 示例：均使用118.0.5993.70版本
RUN wget https://storage.googleapis.com/chrome-for-testing-public/118.0.5993.70/linux64/chrome-linux64.zip && unzip chrome-linux64.zip -d /opt/
RUN wget https://storage.googleapis.com/chrome-for-testing-public/118.0.5993.70/linux64/chromedriver-linux64.zip && unzip chromedriver-linux64.zip -d /opt/

5. 修复执行权限 #

Lambda默认以非root用户运行，需确保Chrome和ChromeDriver有执行权限：

RUN chmod +x /opt/chrome-linux64/chrome /opt/chromedriver-linux64/chromedriver

本地验证步骤 #

先在本地复现问题，避免反复推送ECR：

docker build -t lambda-crawler .
docker run -p 9000:8080 lambda-crawler
# 新终端发送测试请求
curl -XPOST "http://localhost:9000/2015-03-31/functions/function/invocations" -d '{}'

同时查看Lambda的CloudWatch日志，搜索chrome关键词，获取更详细的崩溃细节。

内容的提问来源于stack exchange，提问作者weyronn12934