AWS Lambda Python3.11导入pinecone-client遇numpy模块错误

问题原因 #

numpy的C扩展模块依赖特定编译环境，即便在Cloud9的AWS Linux环境中安装，其编译产物与Lambda运行时的底层环境仍存在细微差异，导致无法加载numpy.core._multiarray_umath模块。

修复步骤 #

1. 重新构建符合Lambda环境的依赖层

   • 创建标准层目录结构：

     mkdir -p pinecone-layer/python/lib/python3.11/site-packages
     

   • 使用pip针对Lambda兼容平台安装依赖，确保获取预编译的manylinux包：

     pip install pinecone-client==2.2.4 numpy==1.24.4 \
       --platform manylinux2014_x86_64 \
       --target ./pinecone-layer/python/lib/python3.11/site-packages \
       --implementation cp \
       --python-version 3.11 \
       --only-binary=:all:
     

   • 打包层文件：

     cd pinecone-layer && zip -r pinecone-layer.zip .
     

   • 将生成的pinecone-layer.zip上传为新的Lambda层，并关联到目标函数。

2. 验证层结构正确性
   确保层内的Python包严格位于python/lib/python3.11/site-packages路径下，Lambda仅识别该路径下的依赖文件。

3. 确认函数配置
   检查Lambda函数的运行时是否为Python 3.11，且已正确关联新构建的依赖层。

内容的提问来源于stack exchange，提问作者the_real_hal