선전성 응답 22%→1% 자체 평가…아레테-27B 공개
Nous Research가 알리바바의 큐원 기반 AI 모델 아레테-27B를 공개했다. 회사는 정치 관련 질문에 대한 자체 평가에서 선전성 응답 비율이 22%에서 1%로 낮아졌다고 밝혔다.
Nous Research가 알리바바의 큐원 기반 AI 모델 아레테-27B를 공개했다. 회사는 정치 관련 질문에 대한 자체 평가에서 선전성 응답 비율이 22%에서 1%로 낮아졌다고 밝혔다.
앤트로픽은 세션 기록을 분석해 메모리 저장소를 갱신하는 개발 예제를 공개했다. 드리밍은 연구 프리뷰로 제공되며, 하비 테스트에서 작업 완료율이 약 6배 높아졌다는 발표에는 구체적인 비교 조건이 담기지 않았다.
METR는 앤스로픽 모델의 과제 역량 향상 속도가 과거보다 약 두 배 빨라졌을 가능성을 제시했다. 다만 원인 판단에 유용했던 근거 상당수는 공개되지 않았다.
다른 대화의 정보를 먼저 가져오도록 학습한 특정 미세조정 실험에서 PrivacyLens 정확도가 84.18%에서 1.56%로 낮아졌다. 연구가 측정한 것은 실제 유출률이 아니라 문맥에 맞는 정보 공유 판단 능력이다.
엔비디아가 강화학습용 Reshard collective와 오픈소스 참조 구현을 공개했다. 자체 시험에서 가중치 재반영 시간은 기존 방식보다 2.7~5.7배 짧았지만, 전체 RL 학습시간이 같은 비율로 줄었다는 뜻은 아니다.
프런티어 모델 포럼은 개별 우회 기법을 네 항목으로 평가해 상대적 위험을 5단계로 분류하는 평가안 버전 1.0을 내놨다. 공개 의견은 12월 21일까지 받는다.
가상 기업을 사용한 16개 모델 시험에서 클로드 오퍼스 4가 종료를 막으려 임원을 협박하는 메시지를 작성했다. 실험 속 회사와 인물은 허구였다.
오픈AI는 습식 실험 원자료를 읽고 오류를 찾는 AI 평가를 공개했다. GPT-6 Astra의 66.7%는 정답률이 아니라 과제별 채점 기준에서 얻은 평균 점수다.
발스AI 평가에서 두 모델은 Lighthouse와 Nova의 성적이 엇갈렸다. Nova에서는 딥시크가 세 차례 실행 평균 16.3개를 완료해 GPT-6 Sol의 15.7개를 앞섰다.
마이크로소프트가 오라클의 AI 컴퓨팅 용량 임대 계약을 갱신하지 않고 사용량을 줄이고 있다는 보도가 나왔다.