코딩 에이전트 지수 48%…미스트랄 라지 4 가중치 공개

프랑스 AI 기업 미스트랄(Mistral)이 29일 ‘미스트랄 라지 4(Mistral Large 4)’의 가중치를 공개했다. 회사가 제시한 코딩 에이전트 평가 점수는 48%다.

미스트랄의 공식 모델 카드에는 약 1조 파라미터 규모의 모델 파일과 자체 배포 안내가 올라왔다. 기업은 가중치를 내려받아 자체 인프라에서 모델을 실행할 수 있다.

미스트랄은 10월 6일 API 미리보기를 공개하면서 10월 말 가중치 배포를 예고했다. 본지는 공개 프리뷰에서 시험별 성적이 엇갈렸다고 보도했다.

라지 4는 전체 약 1조 개 파라미터 가운데 토큰 하나를 처리할 때 약 490억 개를 활성화한다. 임베딩과 출력 계층까지 포함하면 활성 파라미터는 520억 개다. 전체 파라미터가 매번 동시에 작동하는 구조는 아니다.

모델은 텍스트와 이미지를 입력받고 텍스트를 출력하며, 최대 100만 토큰의 문맥을 처리한다. 미스트랄은 지시 수행·추론·코딩 기능을 한 모델에 담았다고 설명했다.

미스트랄은 모델 카드에서 라지 4가 아티피셜 애널리시스(Artificial Analysis) 코딩 에이전트 지수에서 48%를 기록했다고 밝혔다. 회사는 오픈 웨이트 모델 GLM-5.3과 사실상 동률이며 작업당 평균 토큰 사용량은 47% 적었다고 설명했다.

코딩 에이전트 지수는 소프트웨어 개발 과제, 명령어 실행, 기술 질의응답 등 세 평가의 점수를 같은 비중으로 합산한다. 따라서 48%는 코딩 에이전트 평가 범위의 수치다.

미스트랄이 10월 6일 미리보기 발표에서 제시한 코딩 에이전트 지수 점수는 49.8%였다. 발표 시점과 모델 버전이 다르므로 이 수치를 이번에 공개된 가중치의 결과와 같은 것으로 볼 수는 없다.

독립 종합 평가에서 아티피셜 애널리시스는 라지 4의 고강도 추론 설정에 26점을 매겼다. 평가 페이지에 따르면 같은 규모의 오픈 웨이트 모델 중앙값은 23점이며, 지수는 지식 업무·코딩·과학·일반 지식 등 9개 평가를 반영한다.

미스트랄도 모델 카드에서 중국의 선두 오픈 웨이트 모델들이 종합 지수에서 더 높은 점수를 받는다고 밝혔다. 코딩 에이전트 평가와 종합 지수는 평가 범위가 다르다.

사이버 보안 점수는 미리보기 모델 기준이다. 미스트랄은 10월 6일 발표에서 CyberGym-E2E 82%, Cybench 93%를 제시했다.

아티피셜 애널리시스가 별도로 시행한 131개 과제의 CyberGym-E2E-AA 평가에서는 미리보기 모델이 81.7%로 2위를 기록했다. 이 결과는 최종 공개 모델의 독립 평가 결과와 구분해야 한다.

모델 카드에는 vLLM·SGLang·Transformers를 이용한 실행 방법이 안내돼 있다. vLLM 실행 예시는 GPU 8개를 사용하는 설정으로, 모든 환경에 GPU 8개가 필요하다는 의미는 아니다.

본지는 앞서 미스트랄이 라지 4를 API 예시 모델로 제시했다고 보도했다. 이번 가중치 공개로 기업은 API 이용과 별도로 자체 인프라에서 모델을 운용할 수 있게 됐다.

이용 조건은 미스트랄 에코시스템 오픈 웨이트 라이선스(Mistral Ecosystem Open-Weight License)에 따른다. 모델 자체를 서비스 형태로 제공하는 사업은 미스트랄과 별도 상업 계약을 맺어야 한다.