【发布时间】:2021-08-06 00:51:51
【问题描述】:
运行 lambda 代码时出现以下错误,我正在使用名为
的库from flatten_json import flatten
我试图寻找一个 lambda 层,但没有在网上找到任何东西,请告诉我是否有人以前使用过这个或建议任何替代方法
【问题讨论】:
标签: python aws-lambda aws-lambda-layers
运行 lambda 代码时出现以下错误,我正在使用名为
的库from flatten_json import flatten
我试图寻找一个 lambda 层,但没有在网上找到任何东西,请告诉我是否有人以前使用过这个或建议任何替代方法
【问题讨论】:
标签: python aws-lambda aws-lambda-layers
flatten_json 库丢失。
使用pip install flatten_json获取
【讨论】:
您需要执行四个步骤:
我的回答将集中在 1. 和 2. 上,因为它们对您的问题最重要。不幸的是,打包 Python 依赖项可能比其他运行时复杂一些。
主要问题是某些依赖项在后台使用 C 代码,尤其是性能关键库,例如机器学习等。
C 代码需要编译,如果您在您的机器上运行pip install,代码将为您的计算机编译。 AWS Lambdas 使用linux 内核和amd64 架构。因此,如果您在具有 AMD 或 Intel 处理器的 Linux 机器上运行pip install,您确实可以只使用pip install。但如果你使用 macOS 或 Windows,你最好的选择是 Docker。
pip install --target python flatten_json
zip -r layer.zip python
lambci project 为构建和运行 Lambda 提供了出色的 Docker 容器。在以下示例中,我使用了他们的 build-python3.8 图像。
docker run --rm -v $(pwd):/var/task lambci/lambda:build-python3.8 pip install --target python flatten_json
zip -r layer.zip python
请注意,$(pwd) 是您当前的目录。在 macOS 和 WSL 上这应该可以工作,但如果它不起作用,您可以将其替换为当前目录的绝对路径。
这些命令会将依赖项安装到名为python 的target 文件夹中。名字很重要,因为它是one of two folders of a layer where Lambda looks for dependencies。
python 文件夹会递归地 (-r) 归档在名为 layer.zip 的文件中。
您的下一步是在 AWS 中创建一个新层并将您的函数与该层相关联。
【讨论】:
有两个选项可供选择
选项 1) 您可以使用部署包将函数代码部署到 Lambda。
flatten_json 作为代码打包到 Lambda。flatten_json
选项 2) 创建一个具有所需库依赖项的层,在您的情况下为 flatten_json。然后将该层附加到您的 Lambda。
如何在 1) 和 2) 之间做出选择?
【讨论】: