추측보다는 측정

회사업무를 하면서 celery 작업 중 날짜로 argument를 받는 작업이 많다. 근데 여기서 귀찮은 점은 기본 celery serializer가 json으로 되어 있어서 이를 받았을 때 다시 변환하는 작업을 해줘야 하는데 이 과정에서 휴먼 에러가 너무 발생한 것을 많이 느낀 나는 python 객체로 그냥 넘기는 방법이 뭐가 있을까? 하고 고민을 하게 되었습니다. https://docs.celeryproject.org/projects/kombu/en/stable/userguide/serialization.html Serialization — Kombu 5.2.2 documentation This document is for Kombu's development version, which can be si..

Celery의 병렬 작업을 쓰게 된 계기는 데이터 관련 처리를 하면서 전체 유저에 관한 엑셀 파일을 만드는 작업에서 시작되었다. 하나의 shell에서 작업하기에는 시간이 많이 걸려서 원래 쉘을 한 9개 정도 켜서 작업을 진행했었는데 이러한 작업들을 충분히 작업큐로 해결할 수 있을 것 같은 생각이 들었다. ( 정말 쉘 9개 켜서 복사 붙여넣기 하는 거 시간이 정말 아까웠다. 이걸로 인해 나의 개발 시간 1시간을 벌 수 있게 되었다. 그래서 병렬작업으로 처리하면서 어떻게 돌릴 수 있을까? 에서 시작되어 까먹지 않기 위해 이 글을 적으려고 한다. celery가 돌아가는 기본 원리는 다들 아실거라 생각하고 진행하겠습니다. @shared_task def something_task(self): ... app.con..

1. 가상환경 설정 및 장고 설치 #가상환경 설정 python3 -m venv venv #가상환경 ON source ./venv/bin/activate #django 설치 pip install django #프로젝트 설치 django-admin startproject batch . 도커환경에 맞게 구현하기 위해 해당 디렉터리 구조를 변경하였다. 2. django settings.py #장고 프로젝트 내의 시간을 한국 시간으로 설정 LANGUAGE_CODE = 'ko' TIME_ZONE = 'Asia/Seoul' USE_I18N = True USE_L10N = True USE_TZ = True # celery와 관련된 환경설정 CELERY_BROKER_URL = 'redis://redis:6379/0' C..