연구진이 효율성과 범용성을 높인 완전 공개 비디오 MLLM인 VideoChat3을 공개했어요.
VideoChat3은 I3D-ViT와 Adaptive Frame Resolution 기술을 통해 효율적인 비디오 처리 비용을 줄이고, VideoChat3-Academic2M, VideoChat3-LV116K, VideoChat3-OL617K 세 가지 고품질 학습 데이터셋을 구축하여 다양한 비디오 유형에 대한 모델의 일반화 능력을 향상시켰어요.
VideoChat3은 4B 파라미터로 기존 오픈소스 모델을 능가하는 성능을 보여주며, 일반, 장문, 스트리밍 벤치마크에서 우수한 결과를 달성했어요.