由于 psycopg2 无法使用无服务器框架进行部署。 Docker 安装 psycopg2 不工作

Question

所以这是我的相关的 serverless.yml 文件：

plugins:
  - serverless-python-requirements

# registers the plugin with Serverless
# hooking into the Framework on a deploy command. Before your package is zipped, it uses Docker to install the
# packages listed in your requirements.txt file and save them to a .requirements/ directory. It then symlinks the
# contents of .requirements/ into your top-level directory so that Python imports work as expected.
custom:
  pythonRequirements:
    dockerizePip: non-linux
    zip: true
    slim: true

在我的requirements.txt文件中，我有这个： psycopg2==2.8.3

当我运行sls deploy时，我看到了这个：

Error: pg_config executable not found.

    pg_config is required to build psycopg2 from source.  Please add the directory
    containing pg_config to the $PATH or specify the full executable path with the
    option:   python setup.py build_ext --pg-config /path/to/pg_config build

我的pg_config脚本在/env/local/bin中为： pg_config@ ->../Cellar/postgresql/11.5_1/bin/pg_config

我还可以做些什么？ 简而言之，psycopg2 需要在 docker 中构建，以便创建的二进制文件适用于 aws lambda。 我无法使用serverless-python-requirements插件来实现它。 我还可以做些什么？

Answer 1

我有同样的问题，我看到的许多帖子对我没有帮助。 例如，本文 [1] 在需要正确设置安全组和子网方面有很大帮助，但是查看代码 [2] 我看不出它是如何安装的，因为它会得到同样的错误。

我所做的是在顶级无服务器目录中创建了 Dockerfile，然后注入所需的文件。 Dockerfile 看起来像这样：

FROM lambci/lambda:build-python3.7
RUN yum install -y postgresql-devel python-psycopg2 postgresql-libs

然后在serverless.yaml文件中我添加了这个：

custom:
  pythonRequirements:
    dockerizePip: non-linux
    dockerFile: ./Dockerfile

从文档 [3] 中，这将采用 Dockerfile （现在有pg_config ）并将requirements.txt添加到它。 如果恢复速度超快，您可能需要清除缓存版本。

Protip：如果你让它编译，然后当你调用 function 时得到 30 秒的超时，你可能需要更改安全组和/或子网以确保它可以访问你的 Redshift 集群。

希望有帮助！

1. https://serverless.com/blog/etl-job-processing-with-serverless-lambda-and-redshift/
2. https://github.com/rupakg/serverless-etl
3. https://github.com/UnitedIncome/serverless-python-requirements

Answer 2

我尝试了@vallard 的解决方案，但在 AWS Lambda 中出现错误：

ImportModuleError: Unable to import module 'handler.py' libpq.so.5: cannot open shared object file: No such file or directory

最后通过将psycopg2-binary添加到 serverless-python-requirements 插件使用的处理程序的 requirements.txt 使其工作。