연구진은 스트리밍 비디오 모델의 실시간 예측 능력을 평가하는 새로운 벤치마크인 SPOT-Bench를 발표했어요.
SPOT-Bench는 다중 턴의 능동적인 질문을 통해 스트리밍 인지 능력과 실시간 어시스턴트에 필요한 기능을 평가하며, Timeliness-F1 지표를 활용해 예측의 시간적 정확성과 전체 비디오 커버리지를 측정해요.
AsynKV라는 새로운 기술은 스트리밍 환경에 맞춰 기존 모델을 조정하여 이벤트 인지 능력을 유지하면서 예측 성능을 향상시키며, SPOT-Bench에서 뛰어난 성능을 보여줬어요.