随笔 - 75  文章 - 0  评论 - 1  阅读 - 17135

python-celery专注于实现分布式异步任务处理、任务调度的插件!

celery是一个基于分布式消息传输的异步任务队列,它专注于实时处理,同时也支持任务调度。它的执行单元为任务(task),利用多线程,如Eventlet,gevent等,它们能被并发地执行在单个或多个职程服务器(worker servers)上。任务能异步执行(后台运行)或同步执行(等待任务成)。

Celery的三个主要模块

'''
worker:用于执行队列中的工作任务
beat:用于定时分配工作任务
task:工作任务,可以是在代码里的调用、也可以是被beat分配定时任务
'''

Celery的使用条件

'''
1、安装消息中间件的支持,一般是redis。
pip install redis
2、安装Celery的支持
pip install celery
3、安装本地redis服务端并启动
'''

做一个Celery定时任务

'''
导入相关依赖包
'''
import celery  # celery 定时任务包
import time  # 时间记录
from datetime import timedelta  # 时间处理

'''
创建一个worker用来执行定时任务
'''

# 创建worker、连接到redis消息中间件
worker = celery.Celery("work_test", backend="redis://localhost:6379/", broker="redis://localhost:6379/")

# 创建任务配置类TaskConfig

class TaskConfig:
    beat_suhedule = {
        'update_info': {
            'task': 'test013.test3.test_task',  # 任务所在的模块.函数
            "schedule": timedelta(seconds=5),  # 定时任务间隔时间
        }
    }

# worker配置生效

worker.config_from_object(TaskConfig)


@worker.task
def test_task():
    '''
    任务
    :return:
    '''
    return "当前任务执行状态:success,{}".format(time.time())

'''
启动 beat 分配定时任务
celery -A test3.worker beat
'''

# C:\work-code\base-python3\test013>celery -A test3.worker beat

'''
启动 beat 分配定时任务
celery -A test3.worker worker
'''

# C:\work-code\base-python3\test013>celery -A test3.worker worker

file

file

 

洗衣液香精

 

posted on   itips  阅读(140)  评论(1编辑  收藏  举报
编辑推荐:
· 记一次.NET内存居高不下排查解决与启示
· 探究高空视频全景AR技术的实现原理
· 理解Rust引用及其生命周期标识(上)
· 浏览器原生「磁吸」效果!Anchor Positioning 锚点定位神器解析
· 没有源码,如何修改代码逻辑?
阅读排行:
· 全程不用写代码,我用AI程序员写了一个飞机大战
· DeepSeek 开源周回顾「GitHub 热点速览」
· 记一次.NET内存居高不下排查解决与启示
· MongoDB 8.0这个新功能碉堡了,比商业数据库还牛
· .NET10 - 预览版1新功能体验(一)
< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5

点击右上角即可分享
微信分享提示