신기준 벤치마크, 대형 모델 저지연 작업 성능 저조, 최고 통과율 36%

Techub News는 AI 시스템이 실시간 상호작용 과제에서의 성능을 평가하기 위해 Realtime-Bench가 발표되었으며, 50개의 웹과 게임 과제를 포함한다고 보도했습니다. 테스트 결과, OpenAI GPT-6 Astra가 실시간 조건에서 가장 높은 통과율인 36%를 기록했습니다; 시계가 정지된 경우 고추론 모델은 70%에서 80%에 근접할 수 있습니다. 이 벤치마크는 텍사스 대학교 오스틴 캠퍼스, NVIDIA, 노스웨스턴 대학교 등 기관들이 구축했으며, 모델의 시간 상태 인지, 적응형 추론, 그리고 타이밍 행동 능력을 평가합니다. 테스트에 참여한 모델에는 Anthropic, Google, DeepSeek 등이 포함됩니다. (Import AI)