Django中celery配置总结

情景:

用户发起request,并等待response返回。在本些views中,可能需要执行一段耗时的程序,那么用户就会等待很长时间,
造成不好的用户体验,比如发送邮件、手机验证码等。

使用celery后,情况就不一样了。解决:将耗时的程序放到celery中执行。

celery官方网站http://www.celeryproject.org/
celery中文文档http://docs.jinkan.org/docs/celery/

celery名词:

  • 任务task:就是一个Python函数。
  • 队列queue:将需要执行的任务加入到队列中。
  • 工人worker:在一个新进程中,负责执行队列中的任务。
  • 代理人broker:负责调度,在布置环境中使用redis。

celery解决的问题:

  当浏览器访问的页面当中有耗时的操作时,访问的客户体验不好使用celery可以将耗时的操作创建一个新的进程处理

执行流程:

  产生任务task会放到queue队列中,代理人broker会通知空闲的worker工人队列中有任务,worker工人就会去队列中把任务task取出来执行。

每一个worker就是一个工作的进程。

配置流程:

安装包:

celery==3.1.25
celery-with-redis==3.0
django-celery==3.1.17 

1.在test6/settings.py中安装。

INSTALLED_APPS = (
    ...
    'djcelery',
}

2.在test6/settings.py文件中配置代理和任务模块。

# 配置celery
import djcelery
djcelery.setup_loader()
# 传递消息时使用的redis 的ip 端口 数据库名
BROKER_URL = 'redis://127.0.0.1:6379/2'
# 在booktest文件夹里面的task模块的内容--所以需要创建模块
CELERY_IMPORTS = ('booktest.task')

3.在booktest/目录下创建task.py文件。

import time
from django.core.mail import send_mail
from celery import task
from django.conf import settings

@task
def sayhello():
    print('hello ...')
    time.sleep(2)
    print('world ...')

4.打开booktest/views.py文件,修改sayhello视图如下:

from booktest import task
def sayhello(request):
    """"""
    # print('hello')
    # time.sleep(5)
    # print('work')
    task.sayhello.delay() # 将任务教给celery执行
    return HttpResponse('ok')

5.执行迁移生成celery需要的数据表。

python manage.py migrate

6.启动Redis,如果已经启动则不需要启动。

sudo service redis start 

11)启动worker。

python manage.py celery worker --loglevel=info

12)通过浏览器访问sayhello视图函数即可
总结:

  将一个认为函数操作的功能定义到模块tast当中,然后在视图函数当中执行:tast.tast当中的函数名.delay()即可启动celery执行

posted @ 2017-07-29 20:23  凯哥吧  阅读(3829)  评论(0编辑  收藏  举报