Gemini 3.1 Pro, 성능은 올랐지만, 사용성은 글쎄?
구글은 복잡한 문제 해결을 위한 Gemini 3.1 Pro를 출시, 다양한 플랫폼에서 사용 가능
ARC-AGI-2 벤치마크에서 3 Pro 대비 2배 이상 향상된 성능을 보이며, 추론 능력 개선
실제 사용성에 대한 비판과 함께, 기존 모델의 문제점(도구 사용, 지시 불이행)이 반복 제기됨
가격 정책 및 Gemini CLI의 사용 편의성에 대한 불만이 제기되며, 경쟁 모델과의 비교가 이루어짐
Gemini 3.1 Pro의 성능 향상과 벤치마크 결과
구글은 Gemini 3.1 Pro가 복잡한 문제 해결 능력을 향상시켰다고 발표하며, ARC-AGI-2 벤치마크(Benchmark)에서 77.1%의 점수를 기록했다고 밝혔다. 이는 Gemini 3 Pro 대비 2배 이상 향상된 수치이다. 또한, 코드 기반 애니메이션 생성, 복잡한 시스템 합성, 대화형 디자인 등 다양한 활용 사례를 제시하며, 향상된 추론 능력(Reasoning Ability)을 강조했다.
Gemini 3.1 Pro의 실사용 경험과 문제점
커뮤니티에서는 Gemini 3.1 Pro의 성능 향상에도 불구하고, 실제 사용성(Usability)에 대한 비판이 제기되었다. 특히, Gemini가 도구를 제대로 사용하지 못하고, 지시를 따르지 않는 경우가 많다는 지적이 나왔다. 또한, Gemini CLI의 사용 편의성 및 가격 정책에 대한 불만이 제기되었으며, 경쟁 모델인 Claude Opus와의 비교를 통해 단점이 부각되었다.
Gemini CLI의 사용성 및 가격 정책에 대한 비판
일부 사용자는 Gemini CLI의 사용 편의성(Usability)에 대해 부정적인 평가를 내렸다. 특히, API 사용료 지불 방식이 명확하지 않고, UI가 직관적이지 않다는 점을 지적했다. 또한, 경쟁 모델에 비해 가격 정책이 불분명하다는 비판도 제기되었다. 이러한 문제점들은 Gemini의 경쟁력 약화(Weakening Competitiveness)로 이어질 수 있다는 우려를 낳았다.
모델 업데이트 주기에 대한 논쟁
일부 댓글에서는 모델 업데이트 주기가 빨라지면서, 모델 간의 행동 차이(Behavioral Divergence)가 커지고 있다는 점을 지적했다. 이는 개발자들이 새로운 모델을 채택할 때마다, 적응의 어려움(Adaptation Difficulty)을 겪게 만든다는 것이다. 또한, 구글이 기존 모델을 예고 없이 중단하거나, 미미한 변경 사항을 공지 없이 적용할 수 있다는 점에 대한 우려도 제기되었다.
