연구진은 일상 활동의 절차적 이해를 평가하는 새로운 벤치마크 EgoProceVQA를 공개했어요.
EgoProceVQA는 6가지 유형의 핵심 단계 중심 질문을 통해 MLLM과 에이전트의 절차적 추론 능력을 평가하고, EgoProceGen 데이터 생성 플랫폼을 통해 3,600개의 질문 데이터를 구축했어요.
EgoProceAgent는 절차적 이해를 위한 도구 라이브러리와 표준화된 서브 스킬 라이브러리를 활용해 자체 스킬 탐색을 통해 기존 오픈소스 모델보다 뛰어난 성능을 달성했어요.