아카이브사이트맵
© 2026 Rayon. All rights reserved.
DevDay
아티클랭킹스페이스채용
롯데온 favicon롯데온

롯데ON, Batch Scheduler 내재화로 비용 절감 및 운영 효율 UP!

by DD
2025-11-26
7개월 전
조회수 7

외부 Batch Scheduler 솔루션의 운영 비용 절감을 위해 내재화를 시작함

Quartz Scheduler를 기반으로, 공통 라이브러리 및 BLUE-GREEN 배포 환경을 고려하여 시스템을 구축함

중복 실행 방지, 무한 RUNNING 등 다양한 예외 케이스를 해결하고, 안정적인 Batch 환경을 구축함

내재화 아키텍처 설계: 안정성과 효율성의 균형

내재화 과정에서 Quartz Scheduler를 활용하여 Batch 실행을 관리하고, 공통 라이브러리를 통해 각 MSA 프로젝트와 통합했다. 구체적으로 API 호출 방식을 통해 Batch 실행을 요청하고, Kafka를 활용하여 모니터링 및 결과 전송을 구현했다. 따라서 BLUE-GREEN 배포 환경에서도 안정적인 운영이 가능하도록 설계되었다.

중복 실행 및 무한 RUNNING 방지 전략

내재화 과정에서 중복 실행과 문제를 해결하기 위해 다양한 기법을 도입했다. 및 개념을 도입하여 중복 실행을 방지하고, 수행 보장을 통해 무한 RUNNING 문제를 해결했다. 반면, 이러한 개선은 을 높이는 데 기여했다.

무한 RUNNING
Queue 사이즈 제한
TTL(Time To Live)
afterJob
Batch 작업의 안정성

배포 환경 고려 사항: BLUE-GREEN 배포

BLUE-GREEN 배포 환경에서 Scheduler의 동작을 제어하기 위해 리더 선출 방식을 구현했다. DB Lock을 활용하여 리더 서버를 조회하고, 최신 Tag의 서버를 리더로 선출했다. 따라서 배포 후 기존 Pod와 신규 Pod가 공존하는 상황에서도 Scheduler의 일관성을 유지할 수 있었다. 결과적으로 서비스 안정성을 확보했다.

Batch Scheduler 내재화 — OnQuartz 개발 여정
중급
아키텍처
Quartz Scheduler
Kafka
Spring
Java
Backend
Data
원문 읽기
원문 읽기

관련 추천 글

Spring Boot 4.1 출시 후 최신 Spring 생태계 소식 모음!

스프링 로고

컬리, Kafka Streams 도입으로 검색 시스템 안정성 확보!

컬리 로고

스프링 카프카(Spring Kafka) 4.1.0-RC1, 4.0.5, 3.3.15 릴리즈

스프링 로고

백엔드 개발, 이제 시스템의 깊이를 파고들다!

레딧 로고

무신사 개발팀, 대규모 이벤트 성공 비결 공개!

무신사 로고

카카오뱅크, AI 기반 FDS 시스템 구축으로 금융 사기 탐지 능력 향상!

카카오뱅크 로고
롯데온 favicon롯데온
중급
아키텍처
Quartz Scheduler
Kafka
Spring
Java
Backend
Data

관련 추천 글

Spring Boot 4.1 출시 후 최신 Spring 생태계 소식 모음!

스프링 로고

컬리, Kafka Streams 도입으로 검색 시스템 안정성 확보!

컬리 로고

스프링 카프카(Spring Kafka) 4.1.0-RC1, 4.0.5, 3.3.15 릴리즈

스프링 로고

댓글 0

첫 번째 댓글을 남겨보세요!