작업 스케줄러, 까다로운 기술적 문제들을 파헤치다!
by DD
6개월 전
조회수 26
작업 스케줄러 구축 시, Lease 기반 작업 할당, Idempotency Key 관리, Timezone 처리 등 까다로운 기술적 문제 발생
Lease를 활용한 작업 할당, Idempotency Key를 통한 중복 방지, DST(일광 절약 시간제) 변환 시의 예외 처리 등 구체적인 해결 방안 제시
커뮤니티에서는 Heartbeat 개념, Petri Nets 활용, 상태 머신 모델링 등 다양한 접근 방식과 Temporal, BullMQ와 같은 도구 활용에 대한 논의 진행
Lease 기반 작업 할당과 Heartbeat
작업 스케줄러에서 Lease는 작업의 독점적 실행을 보장하는 핵심 메커니즘이다. 구체적으로, 작업자는 Lease를 획득하여 작업 실행 중 장애 발생 시 작업을 안전하게 재할당할 수 있도록 한다. 따라서, Heartbeat 메커니즘을 통해 작업자의 생존 여부를 주기적으로 확인하고, Lease 만료 시 작업을 재할당하는 방식이 일반적이다. 반면, Lease 갱신은 오버헤드를 증가시킬 수 있으므로, 적절한 Heartbeat 간격 설정이 중요하다.
