Rumah pembangunan bahagian belakang Tutorial Python Gunakan Celery Redis Django untuk mencipta platform pemprosesan tugas tak segerak yang sangat tersedia

Gunakan Celery Redis Django untuk mencipta platform pemprosesan tugas tak segerak yang sangat tersedia

Sep 26, 2023 pm 12:29 PM
redis celery django

使用Celery Redis Django打造高可用异步任务处理平台

Gunakan Celery Redis Django untuk mencipta platform pemprosesan tugas tak segerak dengan ketersediaan tinggi

Ikhtisar
Dengan perkembangan pesat Internet dan kerumitan sistem aplikasi, permintaan untuk pemprosesan tugas tak segerak juga semakin tinggi dan lebih tinggi. Saderi ialah rangka kerja baris gilir tugas teragih yang berkuasa yang menyediakan cara yang mudah digunakan untuk mengendalikan tugas tak segerak. Redis ialah sistem storan data dalam memori berprestasi tinggi yang digunakan secara meluas dalam cache, baris gilir dan senario lain. Django ialah rangka kerja aplikasi web yang cekap dengan fungsi yang kaya dan kebolehskalaan yang baik. Artikel ini akan memperkenalkan cara menggunakan Celery Redis Django untuk membina platform pemprosesan tugas tak segerak yang sangat tersedia dan menyediakan contoh kod khusus.

Pasang dan konfigurasikan Celery dan Redis
Pertama, kita perlu memasang Celery dan Redis. Dalam persekitaran maya Python, gunakan arahan berikut untuk memasang:

pip install celery
pip install redis
Salin selepas log masuk

Selepas pemasangan selesai, kita perlu melakukan beberapa konfigurasi yang berkaitan. Mula-mula, tambahkan konfigurasi berikut pada fail settings.py Django:

# Celery配置
CELERY_BROKER_URL = 'redis://localhost:6379/0'  # Redis的地址
CELERY_RESULT_BACKEND = 'redis://localhost:6379/0'
Salin selepas log masuk

Seterusnya, buat fail bernama celery.py dan tambahkan maklumat konfigurasi berkaitan Celery pada fail:

from celery import Celery
import os

# 设置Django环境变量
os.environ.setdefault('DJANGO_SETTINGS_MODULE', 'your_django_project.settings')

# 实例化Celery
app = Celery('your_django_project')

# 加载Django配置
app.config_from_object('django.conf:settings', namespace='CELERY')

# 自动发现异步任务
app.autodiscover_tasks()
Salin selepas log masuk

Dengan cara ini, kami selesai Pemasangan dan konfigurasi Saderi dan Redis.

Buat tugas tak segerak
Seterusnya, kita perlu mencipta tugas tak segerak. Dalam aplikasi Django, cipta fail tasks.py dan laksanakan tugas tak segerak:

from celery import shared_task

# 定义异步任务
@shared_task
def process_task(file_path):
    # 任务逻辑代码
    # 处理文件
    with open(file_path, 'r') as file:
        content = file.read()
        # 具体的处理逻辑
        ...
Salin selepas log masuk

Dalam tugasan ini, kami mentakrifkan fungsi process_task, menerima laluan fail sebagai parameter dan melaksanakan logik tugasan tertentu.

Panggil tugas tak segerak
Di mana kita perlu memanggil tugas tak segerak, kita hanya perlu memanggil fungsi process_task dan hantar parameter kepadanya:

from your_django_project.tasks import process_task

...

# 调用异步任务
result = process_task.delay(file_path)
Salin selepas log masuk

Kod di atas melaksanakan tugas tak segerak dengan memanggil kaedah kelewatan, menghantar laluan fail sebagai parameter.

Memantau status dan keputusan tugasan
Seterusnya, kita perlu memantau dan mendapatkan status dan hasil tugasan. Dalam Django, kita boleh mencipta pandangan untuk melaksanakan fungsi ini:

from your_django_project.tasks import app

...

# 获取任务状态和结果
def get_task_status(request, task_id):
    task = app.AsyncResult(task_id)
    response_data = {
        "status": task.status,
        "result": task.result
    }
    return JsonResponse(response_data)
Salin selepas log masuk

Dalam kod di atas, kita mendapat status dan hasil tugas dengan memanggil kaedah AsyncResult, dan merangkumnya sebagai respons format JSON dan mengembalikannya ke hadapan tamat.

Mulakan pekerja Saderi
Akhir sekali, kita perlu memulakan pekerja Saderi untuk mengendalikan tugasan tak segerak. Dalam direktori akar, laksanakan arahan berikut:

celery -A your_django_project worker --loglevel=info
Salin selepas log masuk

Dengan cara ini, kami telah menyelesaikan keseluruhan proses menggunakan Celery Redis Django untuk membina platform pemprosesan tugas tak segerak dengan ketersediaan tinggi.

Ringkasan
Artikel ini memperkenalkan cara menggunakan Celery Redis Django untuk membina platform pemprosesan tugas tak segerak yang sangat tersedia, dan menyediakan contoh kod khusus. Dengan cara ini, kami boleh mengendalikan pelbagai tugas tak segerak dengan mudah dan meningkatkan kelajuan tindak balas dan kebolehpercayaan sistem. Saya harap artikel ini dapat memberikan sedikit bantuan kepada semua orang dalam membina platform pemprosesan tugas tak segerak.

Atas ialah kandungan terperinci Gunakan Celery Redis Django untuk mencipta platform pemprosesan tugas tak segerak yang sangat tersedia. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

Kenyataan Laman Web ini
Kandungan artikel ini disumbangkan secara sukarela oleh netizen, dan hak cipta adalah milik pengarang asal. Laman web ini tidak memikul tanggungjawab undang-undang yang sepadan. Jika anda menemui sebarang kandungan yang disyaki plagiarisme atau pelanggaran, sila hubungi admin@php.cn

Alat AI Hot

Undresser.AI Undress

Undresser.AI Undress

Apl berkuasa AI untuk mencipta foto bogel yang realistik

AI Clothes Remover

AI Clothes Remover

Alat AI dalam talian untuk mengeluarkan pakaian daripada foto.

Undress AI Tool

Undress AI Tool

Gambar buka pakaian secara percuma

Clothoff.io

Clothoff.io

Penyingkiran pakaian AI

Video Face Swap

Video Face Swap

Tukar muka dalam mana-mana video dengan mudah menggunakan alat tukar muka AI percuma kami!

Alat panas

Notepad++7.3.1

Notepad++7.3.1

Editor kod yang mudah digunakan dan percuma

SublimeText3 versi Cina

SublimeText3 versi Cina

Versi Cina, sangat mudah digunakan

Hantar Studio 13.0.1

Hantar Studio 13.0.1

Persekitaran pembangunan bersepadu PHP yang berkuasa

Dreamweaver CS6

Dreamweaver CS6

Alat pembangunan web visual

SublimeText3 versi Mac

SublimeText3 versi Mac

Perisian penyuntingan kod peringkat Tuhan (SublimeText3)

Cara Membina Mod Kluster Redis Cara Membina Mod Kluster Redis Apr 10, 2025 pm 10:15 PM

Mod Redis cluster menyebarkan contoh Redis ke pelbagai pelayan melalui sharding, meningkatkan skalabilitas dan ketersediaan. Langkah -langkah pembinaan adalah seperti berikut: Buat contoh Redis ganjil dengan pelabuhan yang berbeza; Buat 3 contoh sentinel, memantau contoh redis dan failover; Konfigurasi fail konfigurasi sentinel, tambahkan pemantauan maklumat contoh dan tetapan failover; Konfigurasi fail konfigurasi contoh Redis, aktifkan mod kluster dan tentukan laluan fail maklumat kluster; Buat fail nodes.conf, yang mengandungi maklumat setiap contoh Redis; Mulakan kluster, laksanakan perintah Buat untuk membuat kluster dan tentukan bilangan replika; Log masuk ke kluster untuk melaksanakan perintah maklumat kluster untuk mengesahkan status kluster; buat

Cara membersihkan data redis Cara membersihkan data redis Apr 10, 2025 pm 10:06 PM

Cara Mengosongkan Data Redis: Gunakan perintah Flushall untuk membersihkan semua nilai utama. Gunakan perintah flushdb untuk membersihkan nilai utama pangkalan data yang dipilih sekarang. Gunakan Pilih untuk menukar pangkalan data, dan kemudian gunakan FlushDB untuk membersihkan pelbagai pangkalan data. Gunakan perintah DEL untuk memadam kunci tertentu. Gunakan alat REDIS-CLI untuk membersihkan data.

Cara Membaca Gilir Redis Cara Membaca Gilir Redis Apr 10, 2025 pm 10:12 PM

Untuk membaca giliran dari Redis, anda perlu mendapatkan nama giliran, membaca unsur -unsur menggunakan arahan LPOP, dan memproses barisan kosong. Langkah-langkah khusus adalah seperti berikut: Dapatkan nama giliran: Namakannya dengan awalan "giliran:" seperti "giliran: my-queue". Gunakan arahan LPOP: Keluarkan elemen dari kepala barisan dan kembalikan nilainya, seperti LPOP Queue: My-Queue. Memproses Baris kosong: Jika barisan kosong, LPOP mengembalikan nihil, dan anda boleh menyemak sama ada barisan wujud sebelum membaca elemen.

Cara menggunakan perintah redis Cara menggunakan perintah redis Apr 10, 2025 pm 08:45 PM

Menggunakan Arahan Redis memerlukan langkah -langkah berikut: Buka klien Redis. Masukkan arahan (nilai kunci kata kerja). Menyediakan parameter yang diperlukan (berbeza dari arahan ke arahan). Tekan Enter untuk melaksanakan arahan. Redis mengembalikan tindak balas yang menunjukkan hasil operasi (biasanya OK atau -r).

Cara menggunakan kunci redis Cara menggunakan kunci redis Apr 10, 2025 pm 08:39 PM

Menggunakan REDIS untuk mengunci operasi memerlukan mendapatkan kunci melalui arahan SETNX, dan kemudian menggunakan perintah luput untuk menetapkan masa tamat tempoh. Langkah-langkah khusus adalah: (1) Gunakan arahan SETNX untuk cuba menetapkan pasangan nilai utama; (2) Gunakan perintah luput untuk menetapkan masa tamat tempoh untuk kunci; (3) Gunakan perintah DEL untuk memadam kunci apabila kunci tidak lagi diperlukan.

Cara membaca kod sumber redis Cara membaca kod sumber redis Apr 10, 2025 pm 08:27 PM

Cara terbaik untuk memahami kod sumber REDIS adalah dengan langkah demi langkah: Dapatkan akrab dengan asas -asas Redis. Pilih modul atau fungsi tertentu sebagai titik permulaan. Mulakan dengan titik masuk modul atau fungsi dan lihat baris kod mengikut baris. Lihat kod melalui rantaian panggilan fungsi. Berhati -hati dengan struktur data asas yang digunakan oleh REDIS. Kenal pasti algoritma yang digunakan oleh Redis.

Cara menggunakan baris arahan redis Cara menggunakan baris arahan redis Apr 10, 2025 pm 10:18 PM

Gunakan alat baris perintah redis (redis-cli) untuk mengurus dan mengendalikan redis melalui langkah-langkah berikut: Sambungkan ke pelayan, tentukan alamat dan port. Hantar arahan ke pelayan menggunakan nama arahan dan parameter. Gunakan arahan bantuan untuk melihat maklumat bantuan untuk arahan tertentu. Gunakan perintah berhenti untuk keluar dari alat baris arahan.

Cara Mengkonfigurasi Masa Pelaksanaan Skrip Lua di Centos Redis Cara Mengkonfigurasi Masa Pelaksanaan Skrip Lua di Centos Redis Apr 14, 2025 pm 02:12 PM

Pada sistem CentOS, anda boleh mengehadkan masa pelaksanaan skrip LUA dengan mengubah fail konfigurasi REDIS atau menggunakan arahan REDIS untuk mengelakkan skrip jahat daripada memakan terlalu banyak sumber. Kaedah 1: Ubah suai fail konfigurasi Redis dan cari fail konfigurasi Redis: Fail konfigurasi Redis biasanya terletak di /etc/redis/redis.conf. Edit Fail Konfigurasi: Buka fail konfigurasi menggunakan editor teks (seperti Vi atau nano): sudovi/etc/redis/redis.conf Tetapkan had masa pelaksanaan skrip lua: Tambah atau ubah suai baris berikut dalam fail konfigurasi untuk menetapkan masa pelaksanaan maksimum skrip lua (unit: milidor)

See all articles