Celery Redis Django 기술을 활용하여 확장 가능한 비동기 작업 처리 달성
Celery Redis Django 기술을 사용하여 확장 가능한 비동기 작업 처리 달성
소개:
최신 웹 애플리케이션에서 비동기 작업 처리는 중요한 요구 사항이 되었습니다. 일부 작업은 시간이 많이 걸리거나 백그라운드에서 실행해야 할 수 있으므로 비동기 작업을 사용하면 애플리케이션의 성능과 사용자 경험을 향상시킬 수 있습니다. 확장 가능한 비동기 작업 처리를 달성하기 위해 Celery, Redis 및 Django 기술을 결합할 수 있습니다. 이를 통해 애플리케이션이 대규모 작업 처리에 직면할 때 수평으로 확장할 수 있는 기능을 갖게 됩니다. 이 기사에서는 Celery, Redis 및 Django 기술을 사용하여 확장 가능한 비동기 작업 처리 시스템을 구현하는 방법을 설명하고 구체적인 코드 예제를 제공합니다.
1. Celery, Redis 및 Django 설치 및 구성
- Celery 설치:
먼저 Celery 라이브러리를 설치해야 합니다. Celery 라이브러리는 다음 명령을 실행하여 설치할 수 있습니다.
pip install celery
- Redis 설치:
다음으로 Redis를 메시지 브로커로 설치해야 합니다. Redis는 다음 명령을 실행하여 설치할 수 있습니다:
pip install redis
- Django 설치:
그런 다음 Django 프레임워크를 설치해야 합니다. 다음 명령을 실행하여 Django를 설치할 수 있습니다.
pip install django
- Celery 구성:
Django 프로젝트의 settings.py 파일에서 다음 Celery 구성을 추가합니다.
CELERY_BROKER_URL = 'redis://localhost:6379/0' CELERY_RESULT_BACKEND = 'redis://localhost:6379/0'
- Celery 인스턴스 만들기:
__init__에서 Django 프로젝트 .py 파일에 다음 코드를 추가합니다.
from celery import Celery app = Celery('your_app_name') app.config_from_object('django.conf:settings', namespace='CELERY') app.autodiscover_tasks()
2. 비동기 작업 코드 작성
- tasks.py 파일 생성:
Django 프로젝트의 루트 디렉터리에tasks.py라는 파일을 생성합니다. - 비동기 작업 작성:
tasks.py에서 비동기 작업을 정의할 수 있습니다. 예를 들어 Celery를 통해 비동기 작업을 처리하는 프로세스를 보여주기 위해 간단한 비동기 작업을 작성합니다.
from celery import shared_task from time import sleep @shared_task def send_email(): sleep(5) # 休眠5秒来模拟一个耗时的任务 # 在此处编写发送邮件的代码 print("邮件发送成功!")
3. Celery Worker 및 Beat 시작
- Celery Worker 시작:
명령줄에서 다음의 루트 디렉터리로 이동합니다. Django 프로젝트를 실행하고 다음 명령을 실행하여 Celery Worker를 시작합니다:
celery -A your_app_name worker --loglevel=info
- Celery Beat 시작:
명령줄에서 Django 프로젝트의 루트 디렉터리로 이동하고 다음 명령을 실행하여 Celery Beat를 시작합니다(실행용) :
celery -A your_app_name beat --loglevel=info
4. Django 뷰에서 비동기 작업 호출
- Django 뷰에서 비동기 작업 가져오기:
비동기 작업을 호출해야 하는 경우 작업을 가져와야 합니다. 예를 들어 views.py 파일에 다음 import 문을 추가할 수 있습니다.
from your_app_name.tasks import send_email
- 비동기 작업 호출:
비동기 작업을 호출해야 하는 경우 .delay() 메서드를 사용하여 작업을 호출합니다. 예를 들어 Django 뷰 함수에서 다음 코드를 실행하여 send_email 작업을 호출할 수 있습니다.
def some_view(request): # 其他代码... send_email.delay() # 其他代码...
위 단계를 통해 Celery, Redis 및 Django를 기반으로 확장 가능한 비동기 작업 처리 시스템을 구현했습니다. 우리는 Celery와 Redis를 메시지 브로커와 결과 저장소로 사용하고 Django를 사용하여 비동기 작업을 관리하고 예약합니다. 이러한 방식으로 우리 애플리케이션은 많은 수의 비동기 작업을 처리할 수 있으며 수평 확장이 가능합니다.
결론:
Celery, Redis 및 Django 기술을 사용하면 확장 가능한 비동기 작업 처리 시스템을 쉽게 구현할 수 있습니다. 적절한 구성과 스케줄링을 통해 우리 애플리케이션은 많은 수의 비동기 작업을 효율적으로 처리할 수 있으므로 사용자 경험과 애플리케이션 성능이 향상됩니다. 동시에 Celery 및 Redis와 같은 신뢰할 수 있는 도구를 활용하여 대규모 작업 처리에 직면할 때 시스템을 안정적이고 신뢰할 수 있게 만들 수 있습니다.
참조 링크:
- https://docs.celeryproject.org/en/stable/index.html
- https://realpython.com/asynchronous-tasks-with-django-and-celery/
위 내용은 Celery Redis Django 기술을 활용하여 확장 가능한 비동기 작업 처리 달성의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

핫 AI 도구

Undresser.AI Undress
사실적인 누드 사진을 만들기 위한 AI 기반 앱

AI Clothes Remover
사진에서 옷을 제거하는 온라인 AI 도구입니다.

Undress AI Tool
무료로 이미지를 벗다

Clothoff.io
AI 옷 제거제

Video Face Swap
완전히 무료인 AI 얼굴 교환 도구를 사용하여 모든 비디오의 얼굴을 쉽게 바꾸세요!

인기 기사

뜨거운 도구

메모장++7.3.1
사용하기 쉬운 무료 코드 편집기

SublimeText3 중국어 버전
중국어 버전, 사용하기 매우 쉽습니다.

스튜디오 13.0.1 보내기
강력한 PHP 통합 개발 환경

드림위버 CS6
시각적 웹 개발 도구

SublimeText3 Mac 버전
신 수준의 코드 편집 소프트웨어(SublimeText3)

Redis Cluster Mode는 Sharding을 통해 Redis 인스턴스를 여러 서버에 배포하여 확장 성 및 가용성을 향상시킵니다. 시공 단계는 다음과 같습니다. 포트가 다른 홀수 redis 인스턴스를 만듭니다. 3 개의 센티넬 인스턴스를 만들고, Redis 인스턴스 및 장애 조치를 모니터링합니다. Sentinel 구성 파일 구성, Redis 인스턴스 정보 및 장애 조치 설정 모니터링 추가; Redis 인스턴스 구성 파일 구성, 클러스터 모드 활성화 및 클러스터 정보 파일 경로를 지정합니다. 각 redis 인스턴스의 정보를 포함하는 Nodes.conf 파일을 작성합니다. 클러스터를 시작하고 Create 명령을 실행하여 클러스터를 작성하고 복제본 수를 지정하십시오. 클러스터에 로그인하여 클러스터 정보 명령을 실행하여 클러스터 상태를 확인하십시오. 만들다

Redis 데이터를 지우는 방법 : Flushall 명령을 사용하여 모든 키 값을 지우십시오. FlushDB 명령을 사용하여 현재 선택한 데이터베이스의 키 값을 지우십시오. 선택을 사용하여 데이터베이스를 전환 한 다음 FlushDB를 사용하여 여러 데이터베이스를 지우십시오. del 명령을 사용하여 특정 키를 삭제하십시오. Redis-Cli 도구를 사용하여 데이터를 지우십시오.

Redis의 대기열을 읽으려면 대기열 이름을 얻고 LPOP 명령을 사용하여 요소를 읽고 빈 큐를 처리해야합니다. 특정 단계는 다음과 같습니다. 대기열 이름 가져 오기 : "큐 :"와 같은 "대기열 : my-queue"의 접두사로 이름을 지정하십시오. LPOP 명령을 사용하십시오. 빈 대기열 처리 : 대기열이 비어 있으면 LPOP이 NIL을 반환하고 요소를 읽기 전에 대기열이 존재하는지 확인할 수 있습니다.

CentOS 시스템에서는 Redis 구성 파일을 수정하거나 Redis 명령을 사용하여 악의적 인 스크립트가 너무 많은 리소스를 소비하지 못하게하여 LUA 스크립트의 실행 시간을 제한 할 수 있습니다. 방법 1 : Redis 구성 파일을 수정하고 Redis 구성 파일을 찾으십시오. Redis 구성 파일은 일반적으로 /etc/redis/redis.conf에 있습니다. 구성 파일 편집 : 텍스트 편집기 (예 : VI 또는 Nano)를 사용하여 구성 파일을 엽니 다. Sudovi/etc/redis/redis.conf LUA 스크립트 실행 시간 제한을 설정 : 구성 파일에서 다음 줄을 추가 또는 수정하여 LUA 스크립트의 최대 실행 시간을 설정하십시오 (Unit : Milliseconds).

REDIS 데이터 만료 전략에는 두 가지 유형이 있습니다. 정기 삭제 : 만료 된 기간 캡-프리브-컨트 컨트 및 만료 된 시간 캡-프레임 딜레이 매개 변수를 통해 설정할 수있는 만료 된 키를 삭제하기위한주기 스캔. LAZY DELETION : 키를 읽거나 쓰는 경우에만 삭제가 만료 된 키를 확인하십시오. 그것들은 게으른 불쾌한 말입니다. 게으른 유발, 게으른 게으른 expire, Lazyfree Lazy-user-del 매개 변수를 통해 설정할 수 있습니다.

Redis Command Line 도구 (Redis-Cli)를 사용하여 다음 단계를 통해 Redis를 관리하고 작동하십시오. 서버에 연결하고 주소와 포트를 지정하십시오. 명령 이름과 매개 변수를 사용하여 서버에 명령을 보냅니다. 도움말 명령을 사용하여 특정 명령에 대한 도움말 정보를 봅니다. 종금 명령을 사용하여 명령 줄 도구를 종료하십시오.

Redis Counter는 Redis Key-Value Pair 스토리지를 사용하여 다음 단계를 포함하여 계산 작업을 구현하는 메커니즘입니다. 카운터 키 생성, 카운트 증가, 카운트 감소, 카운트 재설정 및 카운트 얻기. Redis 카운터의 장점에는 빠른 속도, 높은 동시성, 내구성 및 단순성 및 사용 편의성이 포함됩니다. 사용자 액세스 계산, 실시간 메트릭 추적, 게임 점수 및 순위 및 주문 처리 계산과 같은 시나리오에서 사용할 수 있습니다.

Debian Systems에서 ReadDir 시스템 호출은 디렉토리 내용을 읽는 데 사용됩니다. 성능이 좋지 않은 경우 다음과 같은 최적화 전략을 시도해보십시오. 디렉토리 파일 수를 단순화하십시오. 대규모 디렉토리를 가능한 한 여러 소규모 디렉토리로 나누어 읽기마다 처리 된 항목 수를 줄입니다. 디렉토리 컨텐츠 캐싱 활성화 : 캐시 메커니즘을 구축하고 정기적으로 캐시를 업데이트하거나 디렉토리 컨텐츠가 변경 될 때 캐시를 업데이트하며 readDir로 자주 호출을 줄입니다. 메모리 캐시 (예 : Memcached 또는 Redis) 또는 로컬 캐시 (예 : 파일 또는 데이터베이스)를 고려할 수 있습니다. 효율적인 데이터 구조 채택 : 디렉토리 트래버스를 직접 구현하는 경우 디렉토리 정보를 저장하고 액세스하기 위해보다 효율적인 데이터 구조 (예 : 선형 검색 대신 해시 테이블)를 선택하십시오.
