Pinterest, Android CI 빌드 시간 36% 단축 성공!
by DD
8개월 전
조회수 8
Android E2E 테스트의 느린 CI 빌드 시간 문제를 해결하기 위해 EC2 기반 에뮬레이터를 활용한 자체 테스트 플랫폼을 구축함
과거 실행 시간을 기반으로 하는 런타임 기반의 테스트 샤딩 메커니즘을 개발하여 테스트 실행 시간을 균등하게 분배함
그 결과, 빌드 시간 36% 단축, 가장 느린 샤드 실행 시간 55% 감소 및 개발자 생산성 향상
런타임 기반 샤딩의 원리
Pinterest는 과거 테스트 실행 시간 데이터를 활용하여 각 테스트에 예상 실행 시간을 할당한다. Greedy 알고리즘을 통해 각 샤드에 테스트를 분배하여, 모든 샤드가 비슷한 시간 내에 완료되도록 설계했다. 따라서 테스트 병렬 실행의 효율성을 극대화하고, 전체 빌드 시간 단축을 달성했다.
FTL vs 자체 테스트 플랫폼
FTL(Firebase Test Lab)은 초기 설정 시간 및 인프라 불안정성으로 인해 빌드 시간 증가의 원인이 되었다. 자체 테스트 플랫폼 구축을 통해 에뮬레이터 제어 및 테스트 샤딩을 직접 관리할 수 있게 되었다. 반면, 자체 플랫폼 구축은 과 을 수반한다.
