NVIDIA Cosmos, 피지컬 AI의 미래를 열다!

NVIDIA Cosmos는 피지컬 AI를 위한 WFM(World Foundation Model)으로, 미래 상태 예측을 수행한다.

Cosmos Predict, Transfer, Reason 세 가지 모델을 통해 합성 데이터 생성 및 데이터 큐레이션을 지원한다.

자율주행 및 로봇 학습 분야에서 데이터 부족 문제 해결 및 개발 비용 절감에 기여한다.

WFM의 핵심: 미래 예측과 데이터 생성

WFM은 과거 데이터와 현재 행동을 기반으로 미래 상태를 예측하는 모델이다. 구체적으로 Cosmos Predict는 30초 분량의 연속 영상을 생성하여 자율주행 시나리오를 시뮬레이션한다. 따라서 합성 데이터를 활용하여 데이터 부족 문제를 해결하고, 학습 효율성을 높인다.

Cosmos Transfer와 Reason의 역할

Cosmos Transfer는 기존 세계의 구조를 유지하며 시각적 도메인을 변경한다. 반면 Cosmos Reason은 생성된 데이터의 품질 검증 및 필터링을 담당한다. 결과적으로 데이터 큐레이션을 통해 학습 데이터의 밀도를 높이고, 모델 성능 향상을 이끌어낸다.

피지컬 AI 적용을 위한 실전 가이드

Cosmos는 자율주행 시뮬레이터 및 로봇 스택 위에 확장 레이어로 적용 가능하다. 구체적으로 Predict/Transfer를 활용하여 합성 데이터를 늘리고, Reason으로 필터링하여 데이터 수집/정리 루프를 개선한다. 따라서 개발 시간 단축과 비용 절감을 동시에 달성할 수 있다.