연구진은 영화 분석, 디지털 휴먼 등 실제 응용을 위한 다차원 인간 이해를 평가하는 MHPR 벤치마크를 새롭게 선보였습니다.
MHPR은 개인, 다인, 인간-사물 상호작용 차원을 포괄하며, 속성 분해, 재작성, 다중 모델 투표를 통해 고품질의 확장 가능한 어노테이션을 보장하는 자동 캡션/VQA 생성 파이프라인(ACVG)을 포함합니다.
MHPR 벤치마크를 활용한 Qwen2.5-VL-7B 모델 훈련은 상당한 성능 향상을 가져왔으며, 더 큰 모델에 근접한 수준을 달성했습니다.