windows环境中利用celery实现简单任务队列过程解析


Posted in Python onNovember 29, 2019

这篇文章主要介绍了windows环境中利用celery实现简单任务队列过程解析,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下

一、背景

最近因项目需要,学习任务队列Celery的用法;

二、测试使用环境:

1.Windows7 x64

2.Python == 3.7.5

3.celery == 4.3.0

4.redis =3.3.11

5.eventlet==0.25.1 ==> pip install eventlet (windows环境必须安装)

6.IDE为pycharm

三、关于celery的安装和卸载处理

pip install celery #安装

pip install celery == 3.1.25 #指定安装版本

pip uninstall celery #卸载

四、Celery分为3个部分

1.worker部分负责任务的处理,即工作进程(我的理解工作进程就是你写的python代码,当然还包括python调用系统工具功能)

2.broker部分负责任务消息的分发以及任务结果的存储,这部分任务主要由中间数据存储系统完成,比如消息队列服务器RabbitMQ、redis、

3.Celery主类,进行任务最开始的指派与执行控制,他可以是单独的python脚本,也可以和其他程序结合,应用到django或者flask等web框架里面以及你能想到的任何应用

五、上代码:

1.创建Celery实例tasks.py:

# -*- coding: utf-8 -*- 

# 使用celery
import time
from celery import Celery
import redis

# 创建一个Celery类的实例对象
app = Celery('celery_tasks.tasks', broker='redis://:topsky@127.0.0.1:6379/1')

@app.task
def add(a, b):
  count = a + b
  print('任务函数正在执行....')
  time.sleep(5)
  return count

windows环境中利用celery实现简单任务队列过程解析

2.调用celery任务代码:

from celery_tasks.tasks import add
def notity(a, b):
  # result = a + b
  result = add.delay(a, b)
  return result
if __name__ == '__main__':
  result = notity(3, 5)
  print(result)

windows环境中利用celery实现简单任务队列过程解析

六、执行worker

1.创建一个worker,等待处理队列中的任务,打开Windows PowerShell终端以管理员身份运行,cd到E:\SvnCode\myCode目录中,

2.执行命令: celery -A celery_tasks.tasks worker -l info -P eventlet

参数解释,命令中-A参数表示的是Celery APP的名称celery_tasks,这个实例中指的就是tasks.py,后面的tasks就是APP的名称,worker是一个执行任务角色,后面的loglevel=info记录日志类型默认是info,这个命令启动了一个 worker, 用来执行程序中add这个加法任务(task),-P eventlet是防止在windows环境下出现

windows环境中利用celery实现简单任务队列过程解析

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python操作ie登陆土豆网的方法
May 09 Python
scrapy爬虫完整实例
Jan 25 Python
Python实现获取本地及远程图片大小的方法示例
Jul 21 Python
Python找出微信上删除你好友的人脚本写法
Nov 01 Python
python3 实现爬取TOP500的音乐信息并存储到mongoDB数据库中
Aug 24 Python
如何通过Django使用本地css/js文件
Jan 20 Python
Python内置函数locals和globals对比
Apr 28 Python
使用python采集Excel表中某一格数据
May 14 Python
为什么说python适合写爬虫
Jun 11 Python
自定义Django_rest_framework_jwt登陆错误返回的解决
Oct 18 Python
pycharm永久激活超详细教程
Oct 29 Python
浅谈哪个Python库才最适合做数据可视化
Jun 28 Python
基于Python中isfile函数和isdir函数使用详解
Nov 29 #Python
python os.path.isfile 的使用误区详解
Nov 29 #Python
python实现矩阵和array数组之间的转换
Nov 29 #Python
Python3 使用map()批量的转换数据类型,如str转float的实现
Nov 29 #Python
python os.path.isfile()因参数问题判断错误的解决
Nov 29 #Python
python bluetooth蓝牙信息获取蓝牙设备类型的方法
Nov 29 #Python
flask框架配置mysql数据库操作详解
Nov 29 #Python
You might like
如何在PHP中使用正则表达式进行查找替换
2013/06/13 PHP
php脚本守护进程原理与实现方法详解
2017/07/20 PHP
PHP实现简单日历类编写
2020/08/28 PHP
网页上的Javascript编辑器和代码格式化
2010/04/25 Javascript
jquery 学习之二 属性 文本与值(text,val)
2010/11/25 Javascript
利用js读取动态网站从服务器端返回的数据
2014/02/10 Javascript
js中的cookie的读写操作示例详解
2014/04/17 Javascript
鼠标悬停小图标显示大图标
2016/01/22 Javascript
让浏览器崩溃的12行JS代码(DoS攻击分析及防御)
2016/10/10 Javascript
JS实现图片放大缩小的方法
2017/02/15 Javascript
iview table render集成switch开关的实例
2018/03/14 Javascript
在vue中v-bind使用三目运算符绑定class的实例
2018/09/29 Javascript
深入解析koa之异步回调处理
2019/06/17 Javascript
让python json encode datetime类型
2010/12/28 Python
python实现挑选出来100以内的质数
2015/03/24 Python
浅析Python中MySQLdb的事务处理功能
2016/09/21 Python
Python中使用支持向量机(SVM)算法
2017/12/26 Python
在pandas中一次性删除dataframe的多个列方法
2018/04/10 Python
Python3实现爬取指定百度贴吧页面并保存页面数据生成本地文档的方法
2018/04/22 Python
解决Django数据库makemigrations有变化但是migrate时未变动问题
2018/05/30 Python
python实现的MySQL增删改查操作实例小结
2018/12/19 Python
使用 Python 合并多个格式一致的 Excel 文件(推荐)
2019/12/09 Python
tensorboard实现同时显示训练曲线和测试曲线
2020/01/21 Python
django 模型字段设置默认值代码
2020/07/15 Python
属性与 @property 方法让你的python更高效
2020/09/21 Python
pytest fixtures装饰器的使用和如何控制用例的执行顺序
2021/01/28 Python
英国最大的电脑零售连锁店集团:PC World
2016/10/10 全球购物
办护照工作证明范本
2014/01/14 职场文书
元旦晚会主持词
2014/03/24 职场文书
年会主持词结束语
2014/03/27 职场文书
计划生育标语
2014/06/23 职场文书
装修施工安全责任书
2014/07/24 职场文书
法人代表身份证明书及授权委托书
2014/09/16 职场文书
python 三边测量定位的实现代码
2021/04/22 Python
微信小程序实现聊天室功能
2021/06/14 Javascript
万能密码的SQL注入漏洞其PHP环境搭建及防御手段
2021/09/04 SQL Server