【发布时间】:2019-02-20 09:47:07
【问题描述】:
我正在使用按需(作为自动化之前的测试)Bigquery 数据传输作业,它将数据从存储加载到表中。 一切正常,但我输入“传输后删除源文件 | true" 并且最后没有文件被删除。它们不会再次加载,但总是在我的存储文件夹中。
此删除至关重要,因为数据量可能会在短时间内变得非常大。我可以用另一个程序删除它们,但传输服务会变得不那么有趣。
作业本身不会引发任何错误,这意味着某些事情正在默默地失败。你知道什么可能导致这种情况吗?或者也许我错过了这个选项的含义?
谢谢
【问题讨论】:
-
您是否检查过您是否拥有“storage.objects.delete”权限?
-
也许你是对的,但它至少会引发错误或异常。我可能有另一个线索:我可以创建按需作业,但我必须是管理员才能创建计划的传输作业。我会等待这个,然后找出是否缺少某些东西:)
标签: google-bigquery