通过 Python（云函数）从 Google Cloud 存储中解压缩并读取 .gz 文件

Question

我必须在 python（云功能）中从谷歌云存储中读取一个解压缩文件。 我尝试了以下方法，但 CF 每次都崩溃。 GCS 中的文件：ABC.gz

import gzip  

def process(data, context):  
    filename = data['name']  
    with gzip.open("'"+filename+"'", 'rb') as f:  
        file_content = f.read()

请提出建议。

Answer 1

这是预期的行为。当您的函数由 Cloud Storage 事件触发时，您只会获得包含事件的 data 的字典，而不是对象本身。

您应该使用 data 字典中的 name 和 bucket 从 Cloud Storage 获取对象。这是一个可以指导您获取取自here的文件的代码：

import gzip
from google.cloud import storage

def process(data, context):
    storage_client = storage.Client()

    bucket = storage_client.bucket(data['bucket'])
    blob = bucket.blob(data['name'])
    blob.download_to_filename("/tmp/" + data['name'])

    #Here goes your code to unzip the file

考虑到您可能需要将所需的库添加到 requirements.txt 文件中，并将所需的权限授予函数的 Runtime Service Account 以访问 Cloud Storage。