


Bina sistem pemprosesan tugas tak segerak yang cekap: menggunakan Celery Redis Django
Membina sistem pemprosesan tugas tak segerak yang cekap: menggunakan Celery Redis Django
Pengenalan:
Dalam aplikasi web moden, memproses tugas tak segerak adalah tugas yang sangat penting. Pemprosesan tugas tak segerak membolehkan kami mengasingkan tugas yang memakan masa daripada permintaan daripada aplikasi utama, meningkatkan pengalaman pengguna dan prestasi keseluruhan. Dalam artikel ini, kami akan memperkenalkan cara menggunakan rangka kerja Celery, Redis dan Django untuk membina sistem pemprosesan tugas tak segerak yang cekap.
1. Pengenalan kepada Saderi:
Saderi ialah rangka kerja baris gilir tugas yang diedarkan Python yang membolehkan kami mengagihkan tugas kepada pemproses atau pekerja dan berkomunikasi melalui baris gilir mesej. Saderi menyokong berbilang hujung belakang, seperti Redis, RabbitMQ, dsb., tetapi dalam artikel ini kami akan menggunakan Redis sebagai hujung belakang storan untuk baris gilir mesej.
2. Pengenalan kepada Redis:
Redis ialah sistem penyimpanan struktur data dalam memori sumber terbuka, yang boleh digunakan sebagai pangkalan data, cache dan perisian tengah mesej. Redis mempunyai ciri prestasi tinggi, kebolehskalaan dan ketahanan, dan sesuai untuk membina sistem pemprosesan tugas tak segerak yang cekap.
3. Konfigurasi Saderi dalam Django:
-
Pasang Saderi dan Redis:
rreee
Gunakan arahan pip untuk memasang perpustakaan Saderi dan Redis: -
Konfigurasi tetapan Django.py:Dalam tetapan Django.py: projek , tambah item konfigurasi berikut:
pip install Celery redis
Salin selepas log masuk - Buat contoh Saderi:
Dalam direktori akar projek Django, buat fail celery.py dan tambah kandungan berikut:
# Celery settings CELERY_BROKER_URL = 'redis://localhost:6379/0' CELERY_RESULT_BACKEND = 'redis://localhost:6379/0'
Salin selepas log masuk - Buat tugas tak segerak:
Dalam projek Django, Cipta fail tasks.py dan tambah kandungan berikut:
from __future__ import absolute_import, unicode_literals import os from celery import Celery # 设置默认的DJANGO_SETTINGS_MODULE环境变量 os.environ.setdefault('DJANGO_SETTINGS_MODULE', 'your_project.settings') # 创建Celery实例 app = Celery('your_project') # 从Django配置中加载Celery设置 app.config_from_object('django.conf:settings', namespace='CELERY') # 自动从所有已注册的Django app中加载任务模块 app.autodiscover_tasks()
Salin selepas log masuk - Cetus tugas tak segerak:
Dalam fungsi paparan Django, cetuskan pelaksanaan tugas dengan memanggil kaedah kelewatan() tugas tak segerak:
from __future__ import absolute_import, unicode_literals from your_project.celery import app # 定义异步任务 @app.task def process_task(data): # 执行异步任务的逻辑处理 result = process_data(data) return result
Salin selepas log masuk
Masukkan arahan berikut dalam terminal untuk memulakan pekerja Saderi:
from django.shortcuts import render from your_app.tasks import process_task def your_view(request): if request.method == 'POST': data = request.POST.get('data') # 触发异步任务 result = process_task.delay(data) # 返回任务结果给用户 return render(request, 'result.html', {'result': result.id}) else: return render(request, 'your_form.html')
Melalui alatan yang disediakan oleh Celery, kita boleh memantau dan mengurus pelaksanaan tugas tak segerak. Contohnya, anda boleh menggunakan alat Flower untuk memulakan antara muka web untuk memantau baris gilir tugas tak segerak:
celery -A your_project worker --loglevel=info
Dalam artikel ini, kami memperkenalkan cara menggunakan rangka kerja Celery, Redis dan Django untuk membina tugas tak segerak yang cekap sistem pemprosesan. Dengan menggunakan Celery dan Redis, kami boleh dengan mudah memproses tugas yang memakan masa secara tidak segerak dan meningkatkan prestasi aplikasi dan pengalaman pengguna. Reka bentuk sistem pemprosesan tugas tak segerak ini boleh digunakan untuk pelbagai keperluan, seperti penghantaran e-mel latar belakang, pemprosesan imej, dll. Saya harap artikel ini akan membantu anda membina sistem pemprosesan tugas tak segerak yang cekap.
Atas ialah kandungan terperinci Bina sistem pemprosesan tugas tak segerak yang cekap: menggunakan Celery Redis Django. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

Alat AI Hot

Undresser.AI Undress
Apl berkuasa AI untuk mencipta foto bogel yang realistik

AI Clothes Remover
Alat AI dalam talian untuk mengeluarkan pakaian daripada foto.

Undress AI Tool
Gambar buka pakaian secara percuma

Clothoff.io
Penyingkiran pakaian AI

AI Hentai Generator
Menjana ai hentai secara percuma.

Artikel Panas

Alat panas

Notepad++7.3.1
Editor kod yang mudah digunakan dan percuma

SublimeText3 versi Cina
Versi Cina, sangat mudah digunakan

Hantar Studio 13.0.1
Persekitaran pembangunan bersepadu PHP yang berkuasa

Dreamweaver CS6
Alat pembangunan web visual

SublimeText3 versi Mac
Perisian penyuntingan kod peringkat Tuhan (SublimeText3)

Topik panas



Mod Redis cluster menyebarkan contoh Redis ke pelbagai pelayan melalui sharding, meningkatkan skalabilitas dan ketersediaan. Langkah -langkah pembinaan adalah seperti berikut: Buat contoh Redis ganjil dengan pelabuhan yang berbeza; Buat 3 contoh sentinel, memantau contoh redis dan failover; Konfigurasi fail konfigurasi sentinel, tambahkan pemantauan maklumat contoh dan tetapan failover; Konfigurasi fail konfigurasi contoh Redis, aktifkan mod kluster dan tentukan laluan fail maklumat kluster; Buat fail nodes.conf, yang mengandungi maklumat setiap contoh Redis; Mulakan kluster, laksanakan perintah Buat untuk membuat kluster dan tentukan bilangan replika; Log masuk ke kluster untuk melaksanakan perintah maklumat kluster untuk mengesahkan status kluster; buat

Menggunakan Arahan Redis memerlukan langkah -langkah berikut: Buka klien Redis. Masukkan arahan (nilai kunci kata kerja). Menyediakan parameter yang diperlukan (berbeza dari arahan ke arahan). Tekan Enter untuk melaksanakan arahan. Redis mengembalikan tindak balas yang menunjukkan hasil operasi (biasanya OK atau -r).

Cara Mengosongkan Data Redis: Gunakan perintah Flushall untuk membersihkan semua nilai utama. Gunakan perintah flushdb untuk membersihkan nilai utama pangkalan data yang dipilih sekarang. Gunakan Pilih untuk menukar pangkalan data, dan kemudian gunakan FlushDB untuk membersihkan pelbagai pangkalan data. Gunakan perintah DEL untuk memadam kunci tertentu. Gunakan alat REDIS-CLI untuk membersihkan data.

Redis menggunakan satu seni bina berulir untuk memberikan prestasi tinggi, kesederhanaan, dan konsistensi. Ia menggunakan I/O multiplexing, gelung acara, I/O yang tidak menyekat, dan memori bersama untuk meningkatkan keserasian, tetapi dengan batasan batasan konkurensi, satu titik kegagalan, dan tidak sesuai untuk beban kerja yang berintensifkan.

Cara terbaik untuk memahami kod sumber REDIS adalah dengan langkah demi langkah: Dapatkan akrab dengan asas -asas Redis. Pilih modul atau fungsi tertentu sebagai titik permulaan. Mulakan dengan titik masuk modul atau fungsi dan lihat baris kod mengikut baris. Lihat kod melalui rantaian panggilan fungsi. Berhati -hati dengan struktur data asas yang digunakan oleh REDIS. Kenal pasti algoritma yang digunakan oleh Redis.

Untuk melihat semua kunci di Redis, terdapat tiga cara: Gunakan perintah kunci untuk mengembalikan semua kunci yang sepadan dengan corak yang ditentukan; Gunakan perintah imbasan untuk melangkah ke atas kunci dan kembalikan satu set kunci; Gunakan arahan maklumat untuk mendapatkan jumlah kunci.

Untuk membaca giliran dari Redis, anda perlu mendapatkan nama giliran, membaca unsur -unsur menggunakan arahan LPOP, dan memproses barisan kosong. Langkah-langkah khusus adalah seperti berikut: Dapatkan nama giliran: Namakannya dengan awalan "giliran:" seperti "giliran: my-queue". Gunakan arahan LPOP: Keluarkan elemen dari kepala barisan dan kembalikan nilainya, seperti LPOP Queue: My-Queue. Memproses Baris kosong: Jika barisan kosong, LPOP mengembalikan nihil, dan anda boleh menyemak sama ada barisan wujud sebelum membaca elemen.

Redis menggunakan jadual hash untuk menyimpan data dan menyokong struktur data seperti rentetan, senarai, jadual hash, koleksi dan koleksi yang diperintahkan. Redis berterusan data melalui snapshots (RDB) dan menambah mekanisme tulis sahaja (AOF). Redis menggunakan replikasi master-hamba untuk meningkatkan ketersediaan data. Redis menggunakan gelung acara tunggal untuk mengendalikan sambungan dan arahan untuk memastikan atom dan konsistensi data. Redis menetapkan masa tamat tempoh untuk kunci dan menggunakan mekanisme memadam malas untuk memadamkan kunci tamat tempoh.
