当前位置: 首页 > 网络应用技术

如何使用Clery(Django如何使用K8)

时间:2023-03-08 01:41:04 网络应用技术

  指南:本文的首席执行官注释将向您介绍Django如何使用Clery的相关内容。我希望这对每个人都会有所帮助。让我们来看看。

  看到标题,我相信每个人都知道这篇文章要说什么...如果您想使用Clery在Django中执行异步任务,请使用MQ(Rabbimq,下面的Rabbimq,同样)作为消息中间件,那么此帖子可以完全满足您(包括CeleRyp,MQ配置和MQ路由配置),我相信您会喜欢它。

  只需解释:

  1. Django:网络框架

  2. Clery:用于创建异步任务

  3. RabbitMQ:消息队列,主要用于消息存储

  对于芹菜,Rabbimq安装无话可说,PIP只是直接安装,并且配置和启动将不会重复。简短说明了密钥链接如下:

  首先,在django中配置和使用celry

  该配置大致如下:

  (1)在项目目录中,Create celery.py,内容编辑器如下:

  本国的

  (2),在每个应用程序根目录中创建任务。

  与应用程序相关的任务放在任务中。示例如下:

  def get_jid_result(*args,** kwargs):通过任务调度方法:

  1)在一个时间 - 时间任务执行背景后,您可以安装DJCelery模块,并在Django背景中安排注册任务。这里没有详细介绍DJCelery的使用。

  2)触发调度,您需要调用任务,直接调用每个任务的delay()方法(当然,您必须先导入),例如:::

  get_jid_result.delay(*args,** kwargs)

  第二,克莱里·沃克(Clery Wokeer)

  执行sudo -u apache bash -c'芹菜-a patools worcer -l info(请注意,请在此处使用Apache用户执行。芹菜建议不要使用Superuser来启动)并启动Clery Worker。

  建议:为了确保芹菜工艺过程的平稳操作,您可以使用Superivsor来保护该过程的执行。例如,配置如下:

  输入suspisorctl,启动相应的过程,好!

  第三,中间件兔子

  为了选择中间件,Redis,MQ CAN,差异无法详细解释,并选择应用程序情况。在实践中,Rabbimq用作中间件。在这里,Rabbimq路线的简要说明。

  Django设置配置,例如Clery配置部分,此外,配置消息路由:

  celery_default_queue ='default'celery_default_exchange ='default'

  CELERY_DEFAULT_EXCHANGE_TYPE ='direct'

  celery_default_routing_key ='默认值'#路由任务

  Celery_imports =((

  #在此处注册每个应用程序任务文件,请注意必须确保存在注册模块,否则将导致工作过程报告错误

  “ app1.tasks”,

  “ app2.tasks”,

  # 其他应用

  治愈

  #交换的定义,示例如下:

  #路由器定义,示例如下:

  以上是构建Django框架的过程中芹菜和MQ配置应用程序实践的摘要。我希望帮助有相关需求的同志,并批评和纠正他们。

  taskproj/ taskproj/ init .py:

  taskproj/taskproj/settings.py:

  输入项目taskProj目录以启动工作人员:

  芹菜工人-A任务Proj -L调试

  任务定义在每个任务文件中,app01 / tasks.py:

  许多Django应用程序需要执行异步任务,以免延迟HTTP请求的执行。我们还可以选择许多方法来完成异步任务。使用克莱里是一个更好的选择,因为克莱里

  有了大量的社区支持,它可以完美扩展,与Django结合使用也很好。芹菜不仅可以在Django中使用,而且可以在其他地方使用。因此,一旦您学会使用克莱利,我

  我们可以在其他项目中非常方便地使用它。

  1.克莱里版本

  这篇博客文章主要针对芹菜3.0.x。克莱里的早期版本可能有轻微的差异。

  2. Cerry介绍

  Clery的主要用途是执行异步任务。您可以选择扩展或定期执行功能。为什么需要执行异步任务?

  首先,假设用户正在启动请求并等待返回请求。在此请求背后的视图函数中,我们可能需要执行长期的过程任务。目前,我们可能

  它可能远大于用户公差的范围。当不需要立即执行此任务时,我们可以使用Clery在后台执行,而不会影响用户浏览Web。

  当涉及到,我们通常无法确定它花费的时间。

  第二个是定期执行常规任务。例如,您需要每小时检查天气预报,然后将数据存储到数据库中。我们可以编写此任务,然后让芹菜执行

  Web应用程序可以获取最新的天气预报信息。

  我们在这里谈论的任务是python函数(函数)。定期执行任务可以延迟执行此功能。我们可以使用Clery将功能延迟5分钟5分钟。

  任务1并传递参数(1、2、3)。或者我们也可以每天午夜运行该功能。

  我们偏向项目中的项目,这对于访问统一数据库和Django设置的任务很方便。

  准备好任务后,芹菜会将其放在队列队列中。队列存储任务列表。我们可以使用多个队列,但是为简单起见,我们在这里只使用一个。

  将任务任务放在队列中就像加入TODO列表一样。为了使任务运行,我们还需要在其他线程中运行艰苦的工作。工人观察实时行动的任务,然后一一运行。

  一些任务。您可以在不同的服务器上使用多个工人。同样,为简单起见,我们只使用一个工人。

  我们将在以后讨论队列,工人和另一个非常重要的过程。接下来,让我们这样做:

  3.安装克莱里

  我们可以使用PIP在vietualenv中安装:

  PIP安装django-clery

  4. Django设置

  我们暂时使用Django Runserver来启动Clery。和芹菜代理,我们使用Django数据库代理实现。现在我们只需要知道克莱里芹菜

  需要经纪人,您可以使用Django本身作为经纪人。(但是,当部署时,我们最好使用更稳定和高效的布拉克,例如Redis。)

  在steratings.py中:

  导入djcelery

  djcelery.setup_loader()

  broker_url ='django://'

  Em

  instasted_apps =((

  Em

  'djcelery',

  'kombu.transport.django',

  Em

  治愈

  第一个和第二个项目是必要的,第三个项目告诉芹菜将Django项目用作经纪人。

  添加到installed_apps中的djcelery是必要的。kombu.transport.django是基于Django的经纪人

  最后创建芹菜所需的数据表。如果您将South用作数据迁移工具,请运行:

  python manage.py迁移

  否则,运行:( Django 1.6或Django 1.7可以)

  python manage.py syncdb

  5.创建一个任务

  如前所述,任务是Pyhton功能。但是芹菜需要知道此功能是任务,因此我们可以使用装饰器:@task。

  在django应用程序目录中创建taske.py:

  从芹菜导入任务

  @任务 ()

  def add(x,y):

  返回x + y

  当settings.py运行中的djcelery.setup_loader()时,Clery将在APPS Directory中的App Directory中的所有task.py文件中查看Appled_apps中的App Directory中的所有task Files,查找标记为任务的函数,并且预防。

  将它们注册为Clery任务。

  标记函数作为任务不会阻碍其正常执行。您仍然可以像往常一样称呼它:z = add(1,2)。

  6.执行任务

  让我们从一个简单的示例开始。例如,我们希望在用户发送请求并立即返回响应后执行任务异步,以免阻止请求,用户可以平稳访问

  过程。然后,我们可以在Views.py的视图中使用.delay:

  从myapp.tasks导入添加

  Em

  add.delay(2,2)

  Em

  克莱里将添加任务以排队并立即返回。在看到工人一侧的任务后,它将根据设置执行并将其从队列中删除。工人将执行以下一代。

  代码:

  导入myapp.tasks.add

  myapp.tasks.add(2,2)

  7.关于导入

  应该注意的是,当IMPPRT任务时,它需要保持一致。因为执行djcelery.setup_loader()时,任务基于installed_apps中的应用程序名称。

  添加.tasks.function_name进行注册。如果由于不同的Python路径而使用不同的参考方法(例如,使用MyProject.myapp.tasks在tasks.py中导入的the。

  添加表单),Cerly不会知道这是同一任务,因此可能会导致奇怪的错误。

  8.测试

  A。开始工人

  如前所述,我们需要一个工人来执行任务。以下是如何在开发环境中启动工人的方法:

  首先启动终端,例如开发Django项目,激活Virtualenv,切换到Django Project目录。然后启动django构建的Web服务器:Python Manage.py Runserver。

  然后开始工人:

  python manage.py芹菜工人-loglevel =信息

  目前,工人将在终端运行并显示输出结果。

  b。开始任务

  打开新终端,激活Virtualenv,然后切换到Django项目目录:

  $ python manage.py shell

  从myapp.tasks导入添加

  add.delay(2,2)

  目前,您可以看到工人在工作窗口中执行任务:

  [2014-10-07 08:47:08,076:info/mainprocess]从经纪人获得任务:myapp.tasks.add [e080e047-b2a2a7-af74-af74-d7d98b02fc]

  [2014-10-07 08:47:08,299:info/mainprocess]任务myapp.tasks.add [e080e047-b2a2-43a2-43a7-af74-af74-d7d98b02fc]

  9.另一个例子

  让我们看一个更真实的示例,即views.py和tasks.py:

  #views.py

  来自myApp.tasks导入do_something_with_form_data

  def视图(请求):

  form = someform(request.post)

  如果form.is_valid():

  data = form.clenet_data

  #安排任务以稍后进行数据

  do_something_with_form_data.delay(data)(数据)

  返回render_to_response(...)

  #tasks.py

  @任务

  def do_something_with_form_data(数据):

  call_slow_web_service(data ['用户'],data ['text'],...)

  10.调试

  由于克莱里的操作需要启动多个组件,因此我们可能会错过一两个组件。因此,我们建议:

  使用最简单的设置

  使用Python调试和记录功能显示当前过程

  11.渴望模式

  如果在设置中的设置。py:

  Celery_always_eager = true

  然后芹菜以急切的模式运行,然后任务不需要添加延迟即可运行:

  #如果启用了急切的模式,则以下两行代码是相同的

  add.delay(2,2)

  添加(2,2)

  12.查看队列

  因为我们将Django用作经纪人,所以排在Django数据库中的队列。这意味着我们可以通过Django管理员查看队列:

  #admin.py

  来自django.contrib导入管理

  从kombu.transport.django导入模型为kombu_models

  Admin.Site.Register(Kombu_models.message)

  13.检查结果

  运行异步任务后,芹菜将异步对象返回结果。您可以保存它,然后检查任务是否成功运行并返回结果:

  #views.py

  结果= add.delay(2,2)

  Em

  如果结果。dready():

  打印“任务已运行”

  如果结果。Successful():

  打印“结果为:%s”%结果。

  别的:

  如果是isInstance(结果,例外):

  打印“任务失败,原因是提出例外”

  提高结果

  别的:

  打印“任务失败而没有提高例外”

  别的:

  打印“任务尚未运行”

  14.常规任务

  还有一种普通的牧师来执行常规任务。执行常规任务时,芹菜将通过芹菜过程完成。将维护芹菜。一段时间后,需要执行一定时间。

  走路时,芹菜症将其添加到队列中。与工作过程不同,芹菜只需要一个。

  启动CleryBeat:

  python manage.py Clery Beat

  有很多方法可以使芹菜执行常规任务。让我们先查看第一个,然后将常规任务存储在Django数据库中。即使在Django和Clery中运行的状态

  方便地修改常规任务。我们只需要在设置中设置一个即可打开此方法:

  #settings.py

  Celerybeat_scheduler ='djcelery.schedulers.databasescheduler'

  结论:以上是CTO首席执行官如何向所有人介绍Django的全部内容。我希望这对每个人都会有所帮助。如果您仍然想了解有关此信息的更多信息,请记住收集并关注此网站。