Maison >développement back-end >Tutoriel Python >Comment utiliser Celery Redis Django pour améliorer l'efficacité du traitement des tâches asynchrones du site Web

Comment utiliser Celery Redis Django pour améliorer l'efficacité du traitement des tâches asynchrones du site Web

WBOY
WBOYoriginal
2023-09-26 11:22:49646parcourir

如何利用Celery Redis Django提升网站的异步任务处理效率

Comment utiliser Celery Redis Django pour améliorer l'efficacité du traitement des tâches asynchrones du site Web

Avec le développement rapide d'Internet, la complexité des fonctions du site Web augmente également. Afin d'offrir une meilleure expérience utilisateur, nous devons souvent gérer diverses tâches chronophages, telles que l'envoi d'e-mails, la génération de rapports, le traitement des données des robots, etc. Dans la méthode de traitement synchrone traditionnelle, toutes les tâches bloqueront le thread principal, obligeant les utilisateurs à attendre trop longtemps, voire à planter le site Web. Afin de résoudre ce problème, nous pouvons utiliser la combinaison Celery Redis Django pour implémenter un traitement de tâches asynchrone afin d'améliorer l'efficacité et les performances du site Web.

Celery est une file d'attente de tâches distribuée basée sur Python qui implémente l'exécution asynchrone de tâches via un middleware de messages (tel que Redis). Django est un puissant framework Web Python qui peut être facilement intégré à Celery. Ci-dessous, nous expliquerons comment utiliser Celery Redis Django pour implémenter le traitement des tâches asynchrones.

Première étape : installer et configurer Celery et Redis

Tout d'abord, nous devons installer Celery et Redis. Vous pouvez utiliser la commande pip pour installer Celery et Redis-py :

pip install celery
pip install redis

Ensuite, nous devons configurer les informations de connexion de Celery et Redis dans le fichier de configuration settings.py du projet Django :

# 配置Celery Broker和Backend
CELERY_BROKER_URL = 'redis://localhost:6379/0'
CELERY_RESULT_BACKEND = 'redis://localhost:6379/0'

# 配置Celery Worker数量
CELERYD_CONCURRENCY = 4

Étape 2 : Créer un Tâche Celery

Sous une application du projet Django, créez le fichier tâches.py et écrivez le code de la tâche asynchrone. Par exemple, nous créons une tâche pour envoyer des emails :

from celery import shared_task
from django.core.mail import send_mail

@shared_task
def send_email_task(subject, message, from_email, recipient_list):
    send_mail(subject, message, from_email, recipient_list)

Dans cet exemple, nous utilisons le décorateur @shared_task pour convertir la fonction en tâche Celery. Notez que cette tâche est indépendante de toute requête Django et peut être appelée ailleurs. @shared_task装饰器将函数转换为Celery任务。注意,这个任务是独立于任何Django请求的,并且可以在其他地方调用。

第三步:启动Celery Worker

在项目的根目录下,创建一个celery.py文件,并配置Celery应用:

from __future__ import absolute_import
import os
from celery import Celery

# 设置Django默认的配置模块
os.environ.setdefault('DJANGO_SETTINGS_MODULE', 'your_project.settings')

app = Celery('your_project')

# 从Django项目的配置文件中加载Celery配置
app.config_from_object('django.conf:settings')

# 自动加载tasks.py中的任务
app.autodiscover_tasks()

完成以上配置后,我们可以通过以下命令来运行Celery Worker:

celery -A your_project worker --loglevel=info

第四步:在Django视图中调用异步任务

在Django的视图函数或类中,可以通过以下方式来调用异步任务:

from your_app.tasks import send_email_task

def send_email_view(request):
    subject = 'Hello'
    message = 'This is a test email'
    from_email = 'noreply@example.com'
    recipient_list = ['user1@example.com', 'user2@example.com']

    # 异步调用发送邮件的任务
    send_email_task.delay(subject, message, from_email, recipient_list)

    return HttpResponse('Email sent successfully!')

在这个例子中,我们使用delay()方法来异步调用发送邮件的任务。注意,delay()

Étape 3 : Démarrez Celery Worker

Dans le répertoire racine du projet, créez un fichier celery.py et configurez l'application Celery :

rrreee

Après avoir terminé la configuration ci-dessus, nous pouvons exécuter Celery Worker via la commande suivante :

rrreee

Étape 4 : Appeler des tâches asynchrones dans les vues Django

Dans les fonctions ou classes de vue de Django, vous pouvez appeler des tâches asynchrones des manières suivantes :
    rrreee
  • Dans cet exemple, nous utilisons la méthode delay() code> pour appeler de manière asynchrone la tâche d'envoi d'e-mails. Notez que la méthode <code>delay() est non bloquante, elle renvoie immédiatement et exécute les tâches de manière asynchrone en arrière-plan.
  • Grâce aux étapes ci-dessus, nous avons implémenté avec succès le traitement des tâches asynchrones à l'aide de Celery Redis Django. Celery placera les tâches dans la file d'attente des messages et Celery Worker traitera ces tâches de manière asynchrone, améliorant ainsi l'efficacité du traitement et les performances du site Web.
  • Résumé :
L'utilisation de Celery Redis Django peut améliorer efficacement l'efficacité du traitement des tâches asynchrones du site Web. En exécutant des tâches fastidieuses de manière asynchrone, nous pouvons éviter de bloquer le thread principal et accélérer la vitesse de réponse du site Web. Lors de la configuration et de l'écriture de tâches, vous devez faire attention à la configuration et aux méthodes d'appel associées de Celery. Dans le même temps, afin d'améliorer les performances, le nombre de travailleurs de céleri simultanés peut être ajusté de manière appropriée. 🎜🎜Pour des exemples de code, veuillez vous référer aux documents officiels suivants : 🎜🎜🎜Documents officiels de Celery : http://docs.celeryproject.org/en/latest/ 🎜🎜Documents officiels de Django : https://docs.djangoproject.com /🎜🎜Documentation officielle de Redis -py : https://redis-py.readthedocs.io/🎜🎜

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!

Déclaration:
Le contenu de cet article est volontairement contribué par les internautes et les droits d'auteur appartiennent à l'auteur original. Ce site n'assume aucune responsabilité légale correspondante. Si vous trouvez un contenu suspecté de plagiat ou de contrefaçon, veuillez contacter admin@php.cn