【问题标题】:Celery + Django not working at the same timeCelery + Django 不能同时工作
【发布时间】:2018-10-19 16:43:22
【问题描述】:

我有 Django 2.0 项目运行良好,它与 Celery 4.1.0 集成,我正在使用 jquery 向后端发送 ajax 请求,但由于 celery 的一些问题,我刚刚意识到它的加载无休止。

芹菜设置 (celery.py)

from __future__ import absolute_import, unicode_literals
import os
from celery import Celery

# set the default Django settings module for the 'celery' program.
os.environ.setdefault('DJANGO_SETTINGS_MODULE', 'converter.settings')

app = Celery('converter', backend='amqp', broker='amqp://guest@localhost//')

# Using a string here means the worker doesn't have to serialize
# the configuration object to child processes.
# - namespace='CELERY' means all celery-related configuration keys
#   should have a `CELERY_` prefix.
app.config_from_object('django.conf:settings', namespace='CELERY')

# Load task modules from all registered Django app configs.
app.autodiscover_tasks()

@app.task(bind=True)
def debug_task(self):
    print('Request: {0!r}'.format(self.request))

芹菜任务 (tasks.py)

from __future__ import absolute_import, unicode_literals

from celery import shared_task

@shared_task(time_limit=300)
def add(number1, number2):
    return number1 + number2

Django 视图 (views.py)

class AddAjaxView(JSONResponseMixin, AjaxResponseMixin, View):
    def post_ajax(self, request, *args, **kwargs):
        url = request.POST.get('number', '')
        
        task = tasks.convert.delay(url, client_ip)
        result = AsyncResult(task.id)

        data = {
            'result': result.get(),
            'is_ready': True,
        }
        if result.successful():
            return self.render_json_response(data, status=200)

当我向 Django 应用程序发送 ajax 请求时,它会无休止地加载,但是当终止 Django 服务器时,我运行 celery -A demoproject worker --loglevel=info 时,我的任务正在运行。

问题 如何自动执行此操作,以便在我运行 Django 项目时,我的 celery 任务在我发送 ajax 请求时自动运行?

【问题讨论】:

  • 尝试使用if result.ready() 而不是result.successful()。或result.successful() == True,但这里不确定。在您的情况下,if 似乎在 TrueFalse 结果上都被触发了。
  • 我试过了,还是没有成功
  • 你为什么在启动异步任务后立即调用result.get()?这会阻塞整个 HTTP 请求/响应周期,直到任务完成。

标签: django celery celery-task


【解决方案1】:

如果您在开发环境中,则必须手动运行 celery worker,因为它不会在后台自动运行,以便处理队列中的作业。因此,如果您想要一个完美的工作流程,您需要同时运行 Django 默认服务器和 celery worker。如文档中所述:

在生产环境中,您可能希望在后台将 worker 作为守护进程运行 - 请参阅守护进程 - 但对于测试和开发而言,能够使用 celery worker manage 命令启动 worker 实例非常有用就像你使用 Django 的 manage.py 运行服务器一样: celery -A proj worker -l info

您可以阅读他们的文档以了解守护进程。

http://docs.celeryproject.org/en/latest/userguide/daemonizing.html

【讨论】:

    猜你喜欢
    • 2014-12-06
    • 2011-06-01
    • 2021-08-01
    • 2018-06-30
    • 2016-10-07
    • 2016-09-28
    • 2019-04-07
    • 2021-09-08
    • 2019-06-01
    相关资源
    最近更新 更多