제미나이 4 카본, 1528점 1위…예비 순위 1~2위

구글 딥마인드(Google DeepMind)의 제미나이 4 카본(Gemini 4 Carbon)이 Text Arena에서 1528점으로 1위를 기록했지만, 가능한 순위 범위는 1~2위다.

아레나(Arena)가 공개한 10월 27일 기준 순위표에서 제미나이 4 카본의 High 버전은 1528±9점, 4403표를 받았다. 제미나이 4 아르곤(Gemini 4 Argon)의 High 버전은 1520±6점, 1만1889표로 2위에 올랐다.

카본의 점수에는 예비 표시가 붙었고 순위 범위는 1~2위로 제시됐다. 두 모델의 점수 차는 8점이지만, 이 수치만으로 카본이 아르곤을 확실히 앞섰다고 볼 수는 없다.

◇ 답변 선호도 순위와 다른 성능 지표는 구분해야

아레나는 이용자에게 모델 이름을 가린 답변 두 개를 보여주고 더 선호하는 쪽에 투표하게 한다. 투표 결과를 모아 모델별 점수와 순위를 계산한다.

Text Arena 점수는 이용자의 답변 선호도를 나타낸다. 답변의 사실 정확성이나 모든 업무에서의 성능을 직접 입증하는 지표는 아니다. 점수 옆 ±값은 신뢰구간을 나타내며, 투표가 더 쌓이면 순위가 달라질 수 있다.

과제를 바꾸면 순위도 달라진다. 아레나의 웹 개발 평가인 WebDev에서 카본은 1768±15점으로 4위였고, 이 점수 역시 예비치로 표시됐다.

Artificial Analysis는 자체 Intelligence Index v5에서 카본에 59점을 부여해 1위로 평가했다. 앞서 본지는 같은 평가의 59점 결과를 보도했다.

같은 평가기관의 Coding Agent Index에서는 카본이 클로드 오퍼스 5.5(Claude Opus 5.5)에 이어 2위를 기록했다. 각 지표는 서로 다른 평가를 다루므로 순위를 하나의 종합 성적으로 합쳐 해석하기 어렵다.

정식 공개 전인 10월 23일 레딧(Reddit) r/GeminiAI 게시판에는 카본의 성능 개선을 기대하는 글과 제미나이 4 아르곤의 사용량 한도, 응답 속도를 우려하는 이용자 의견이 올라왔다.

당시 글은 카본 공개 전의 개인 경험과 전망을 담은 게시물이다. 공개 이후의 사용 후기나 이용자 전체를 대표하는 조사로 볼 수는 없다.

◇ 초기 제공은 사이버보안 담당자부터

구글 딥마인드는 10월 28일 카본을 차세대 모델로 공개하고 사이버보안과 소프트웨어 개발을 주요 활용 분야로 들었다.

구글 딥마인드는 이번 주 일부 사이버보안 방어 담당자에게 카본을 제공하고, 이후 페어윈드(Fairwind) 프로그램을 통해 신뢰할 수 있는 파트너로 접근을 넓히겠다고 밝혔다.

개발자·기업·일반 이용자를 위한 구체적인 제품 제공 날짜는 발표에 제시되지 않았다.

구글 딥마인드의 발표에는 카본을 가상자산이나 블록체인에 적용한 성능 평가나 사례가 담기지 않았다.