在 Django 中重试任务的最佳位置：请求或 celery 任务

Question

我在 celery 任务中使用 Django 中的 requests 库访问 API。具体来说，它从database 获取一些记录，准备json 并执行POST 请求。在某些情况下，调用失败并出现500 错误代码。我想再次重试POST 请求。最好的方法是什么？为什么？

• 重试 Celery 任务本身 (See implementation)
• 使用urllib.util.retry (See full implementation) 重试请求

Answer 1

每个 Celery 作业都在单独的进程中运行。在您的情况下，重复 500-returned POST 请求与创建另一个进程无关。一个过程将并且应该足以处理此类请求。因此，您需要在同一个 Celery 作业中使用 urllib.util.retry 重试请求，然后终止作业，直到您收到代码为 200 的响应。