Django中celery配置总结
情景:
用户发起request,并等待response返回。在本些views中,可能需要执行一段耗时的程序,那么用户就会等待很长时间,
造成不好的用户体验,比如发送邮件、手机验证码等。
使用celery后,情况就不一样了。解决:将耗时的程序放到celery中执行。
celery官方网站http://www.celeryproject.org/
celery中文文档http://docs.jinkan.org/docs/celery/
celery名词:
- 任务task:就是一个Python函数。
- 队列queue:将需要执行的任务加入到队列中。
- 工人worker:在一个新进程中,负责执行队列中的任务。
- 代理人broker:负责调度,在布置环境中使用redis。
celery解决的问题:
当浏览器访问的页面当中有耗时的操作时,访问的客户体验不好使用celery可以将耗时的操作创建一个新的进程处理
执行流程:
产生任务task会放到queue队列中,代理人broker会通知空闲的worker工人队列中有任务,worker工人就会去队列中把任务task取出来执行。
每一个worker就是一个工作的进程。
配置流程:
安装包:
celery==3.1.25 celery-with-redis==3.0 django-celery==3.1.17
1.在test6/settings.py中安装。
INSTALLED_APPS = ( ... 'djcelery', }
2.在test6/settings.py文件中配置代理和任务模块。
# 配置celery import djcelery djcelery.setup_loader() # 传递消息时使用的redis 的ip 端口 数据库名 BROKER_URL = 'redis://127.0.0.1:6379/2' # 在booktest文件夹里面的task模块的内容--所以需要创建模块 CELERY_IMPORTS = ('booktest.task')
3.在booktest/目录下创建task.py文件。
import time from django.core.mail import send_mail from celery import task from django.conf import settings @task def sayhello(): print('hello ...') time.sleep(2) print('world ...')
4.打开booktest/views.py文件,修改sayhello视图如下:
from booktest import task def sayhello(request): """""" # print('hello') # time.sleep(5) # print('work') task.sayhello.delay() # 将任务教给celery执行 return HttpResponse('ok')
5.执行迁移生成celery需要的数据表。
python manage.py migrate
6.启动Redis,如果已经启动则不需要启动。
sudo service redis start
11)启动worker。
python manage.py celery worker --loglevel=info
12)通过浏览器访问sayhello视图函数即可
总结:
将一个认为函数操作的功能定义到模块tast当中,然后在视图函数当中执行:tast.tast当中的函数名.delay()即可启动celery执行