350억 파라미터, 30억 활성 파라미터의 오픈소스 AI 모델 등장!
by DD
3개월 전
조회수 24
350억 파라미터(3B 활성)의 오픈소스 MoE(Mixture-of-Experts) 모델 Qwen3.6-35B-A3B 출시
에이전트 코딩 성능이 기존 모델 및 경쟁 모델 대비 우수함
Hugging Face, ModelScope에서 가중치(Weights) 다운로드 가능
커뮤니티에서는 모델의 오픈소스 정책과 성능에 긍정적 반응
MoE(Mixture-of-Experts) 아키텍처의 효율성
Qwen3.6-35B-A3B는 350억 개의 파라미터를 가지면서도, 30억 개의 활성 파라미터만을 사용하여 계산 효율성(Computational Efficiency)을 높였다. MoE 아키텍처는 각 입력에 대해 모델의 일부만 활성화하여 메모리 사용량(Memory Usage)을 줄이고, 추론 속도(Inference Speed)를 향상시키는 장점이 있다. 이러한 설계는 특히 대규모 모델의 배포(Deployment) 및 운영 비용(Operational Cost) 절감에 기여한다.
에이전트 코딩 성능 비교 분석
게시된 벤치마크에 따르면 Qwen3.6-35B-A3B는 SWE-bench와 Terminal-Bench와 같은 코딩 관련 벤치마크에서 이전 모델인 Qwen3.5-35B-A3B를 크게 능가한다. 특히, 및 에서 두드러진 성능 향상을 보였다. 이는 개발자가 복잡한 코딩 작업을 자동화하고, 을 높이는 데 기여할 수 있음을 시사한다.
