Discord, Elixir 시스템 추적 기술 도입으로 **성능 문제 해결**

Discord는 Head Sampling 방식을 사용하지만, Fanout 모델로 인해 스팬(Span)의 수가 기하급수적으로 증가하는 문제를 겪었다. 이를 해결하기 위해 동적 샘플링(Dynamic Sampling)을 도입하여, Fanout 크기에 따라 샘플링 비율을 조절했다. Envelope에 `approximate_num_recipients` 필드를 추가하여, 각 세션(Session)이 샘플링 결정(Sampling Decision)을 Fanout 크기에 따라 다르게 하도록 했다. 이러한 접근 방식은 성능 오버헤드(Performance Overhead)를 줄이면서도 유용한 성능 데이터(Performance Data)를 유지하는 데 성공했다.

추적(Tracing) 도입 후, CPU 사용량 증가(CPU Usage Increase) 문제가 발생했다. 주된 원인은 gRPC 요청 처리(gRPC Request Handling) 과정에서 추적 컨텍스트 언패킹(Trace Context Unpacking)에 과도한 CPU 자원이 소모되었기 때문이다. Discord는 샘플링 여부(Sampling Status)를 Trace Context의 마지막 바이트(Last Byte)를 통해 확인하는 방식으로 불필요한 언패킹(Unnecessary Unpacking)을 방지했다. 이러한 최적화를 통해 CPU 사용량(CPU Usage)을 정상 수준(Nominal Levels)으로 되돌릴 수 있었다.