【问题标题】:How to install PYPI package (Facebook-business, Google-cloud-secret-manager) in Google Cloud Composer如何在 Google Cloud Composer 中安装 PYPI 包(Facebook-business、Google-cloud-secret-manager)
【发布时间】:2020-12-13 10:22:20
【问题描述】:

我正在尝试在 Google Cloud Manager 中安装 Facebook-business、Google-cloud-secret-manager Pypi 包,但 20 分钟后出现以下错误:

请找到如上图所示的图片版本。

【问题讨论】:

    标签: python-3.x google-cloud-platform airflow pypi google-cloud-composer


    【解决方案1】:

    使用基于 composer-1.9.1-airflow-1.10.6 图像的运行时构建我的测试 Composer 环境我可能面临同样的问题,缺少属于 google-cloud-secret-managerfacebook_business 包的 PyPI 依赖项,以及影响系统核心正确编译图像更改。

    幸运的是,将以下包链添加到我的 requirements.txt 文件中永久修复了该问题:

    google-cloud-secret-manager==1.0.0
    grpc-google-iam-v1==0.12.3
    google-api-core==1.22.1
    googleapis-common-protos==1.52.0
    google-cloud-bigtable==1.4.0
    google-cloud-spanner==1.17.1
    google-auth==1.20.1
    setuptools==49.6.0
    google-cloud-bigquery==1.27.2
    google-cloud-logging==1.15.1
    google-cloud-core==1.4.1
    protobuf==3.13.0
    google-cloud-storage==1.30.0
    google-resumable-media==0.7.1
    facebook-business==8.0.1
    six==1.15.0
    mock
    pycountry
    curlify
    requests
    

    Composer gcloud更新命令参考指南可以找到here

    仅供参考。 您可以通过 GCP Cloud Build 捕获 Composer 构建器日志并跟踪运行时映像创建进度。

    【讨论】:

    • 非常感谢您对我的问题的即时回答。它为我工作并节省了很多时间。非常感谢您继续帮助他人祝您好运!
    • 我很好奇,如果有任何文档可以知道特定 python PYPI 包的依赖项列表,您是如何找到确切的依赖项列表的?
    • 很高兴,很高兴为您提供帮助。正如我所提到的,特定的依赖差异可能会在 Cloud Build 中重新编译图像时反映出来。
    猜你喜欢
    • 1970-01-01
    • 2020-12-02
    • 1970-01-01
    • 1970-01-01
    • 2019-06-06
    • 2020-03-21
    • 2018-10-13
    • 2019-06-08
    • 2019-03-26
    相关资源
    最近更新 更多