발표 며칠 만에 바뀐 성능 지표, GPT-6 Astra 벤치마크를 그대로 믿으면 안 되는 이유
오픈AI가 GPT-6 Astra 발표문의 벤치마크 수치를 하루 만에 여러 차례 바꿨습니다. 환각률, ARC-AGI-3 하네스별 점수, 경쟁 모델 수치가 어떻게 오갔는지와 그 이유를 정리했습니다.
주제
Astra
Astra 관련 글을 모았습니다. 유토모 테크로그에서 새 기술과 제품이 일과 제품에 만드는 변화를 살펴봅니다.
GPT-6 Astra, 가장 강력한 모델인데 접근은 사이버보안 방어팀부터 좁힌 이유
오픈AI가 GPT-6 Astra를 공개했지만 사이버보안 Critical 등급 판정 때문에 사이버보안 방어팀부터 순차로 접근을 열었습니다. 안전성 개선 수치와 벤치마크 포화, 단계별 배포 일정을 정리합니다.
AI 답변의 속마음을 감시하니 계산 비용이 20% 늘었다, 오픈AI의 선택
오픈AI가 프런티어 모델 학습·평가 전 구간에 다단계 사고 과정 감시를 적용하면서, 감시 대상 연산이 약 20% 더 든다고 밝혔습니다. 이 비용은 고객에게 넘기지 않고 회사가 직접 부담합니다.
