1.9배 추정된 앤트로픽 모델 역량 개선 속도

앤트로픽(Anthropic) 내부 모델의 AECI 점수 증가 속도가 2025년 10월 이전 추세의 1.9배라는 분석이 나왔다. 이는 특정 과제의 벤치마크 점수 상승 속도를 비교한 추정치로, 인공지능(AI) 연구개발 전반이 1.9배 빨라졌다는 뜻은 아니다.

독립 AI 평가기관 METR는 5일 공개한 평가 보고서에서 2026년 10월 기준 앤트로픽이 구체적으로 정의된 과제에서 모델 역량을 과거보다 대략 두 배 빠르게 개선하고 있을 가능성이 크다고 판단했다. 평가는 8월 12일부터 10월 29일까지 진행됐으며, 앤트로픽의 내부 모델 벤치마크 자료와 직원 인터뷰 등을 검토했다.

AECI는 앤트로픽이 내부 모델의 역량을 비교하는 데 쓰는 벤치마크 지표다. METR는 이 지표에서 점수가 오르는 속도를 2025년 10월 이전 추세와 비교했다.

METR가 산출한 증가 속도는 과거 추세의 1.9배였고, 95% 신뢰구간은 1.5~2.8배다. METR는 이를 지난 1년 동안 대략 2년치의 과거 벤치마크 진전을 이룬 것으로 풀이했다.

보고서에 등장하는 ‘3배’는 이 계산의 결과가 아니다. METR는 전체 역량 개선 속도가 과거의 1.3배에 가까울 수도, 3배에 가까울 수도 있다고 봤다. 이는 전체 가속 수준에 대한 주관적 불확실성 범위로, AECI 분석의 95% 신뢰구간과는 별개의 수치다.

◇ 가속 추정과 정책 기준은 별개

가속의 원인에 관해 METR는 2026년 10월 기준 증가분의 과반, 어쩌면 약 80%가 앤트로픽의 AI 활용에서 비롯됐을 수 있다고 추정했다. 다만 이 비율에는 상당한 불확실성이 있다고 덧붙였다.

METR는 2025년 말 나타난 가속에는 다른 요인도 큰 역할을 했을 수 있다고 봤다. 모델 훈련에 투입하는 연산량의 증가 속도가 빨라졌다는 설명은 원인으로 들지 않았다.

앤트로픽의 책임 있는 확장 정책은 AI 연구개발의 급격한 가속을 별도 기준으로 다룬다. AI의 기여가 크지 않을 때 예상되는 속도와 과거에 관찰된 가장 빠른 지속 개선 속도를 기준으로 진척이 두 배가 됐는지, 그 증가분이 연구·엔지니어링 자동화에 상당 부분 기인했는지를 따진다.

METR는 이번 평가가 정책상 임계치 도달 여부를 판정하는 작업은 아니라고 밝혔다. 과거 벤치마크 추세와 비교한 1.9배를 정책 기준의 판정 결과로 해석할 수 없는 이유다.

앤트로픽은 11월 2일 미국 증권거래위원회(SEC)에 제출한 수정 신고서에서 내부 추정과 향후 모델 전망을 바탕으로 AI 기인 급격한 진전 기준을 곧 충족할 수 있다고 밝혔다. 이 회사의 정책 기준에 관한 앞선 설명에서도 현재 모델이 해당 기준을 넘었다고 지정한 것은 아니었다.

이번 평가는 앤트로픽이 10월 15일 METR 연구자 6명에게 임직원급 내부 접근을 제공하겠다고 발표한 조치와도 별도 프로젝트다. METR는 당시 내장형 제3자 평가와 이번 가속도 평가가 서로 다른 작업이라고 밝혔다.

◇ 공개 자료와 평가의 한계

METR는 결론에 큰 영향을 준 근거 상당 부분이 비공개 처리돼 독자가 분석을 독립적으로 검증하기 어렵다고 밝혔다. 앤트로픽은 다른 AI 개발자의 역량 향상에 도움이 될 수 있는 정보를 지우기 위한 조치라고 설명했다.

METR는 평가가 자동 채점하기 쉬운 구체적 과제에 치우쳤을 가능성도 제시했다. 과거 성장 속도가 유난히 낮았던 점이 현재의 가속을 크게 보이게 했을 수 있다는 점도 보고서에 담겼다.