zai-org에서 영상 기반 캐릭터 애니메이션 모델 SCAIL-2를 공개했어요. 기존 방식의 한계를 극복하고 캐릭터 교체 및 다중 캐릭터 애니메이션을 지원해요.
SCAIL-2는 중간 표현(skeleton map, inpainting mask) 없이 영상으로 캐릭터를 제어하며, 동물 영상으로도 캐릭터 애니메이션이 가능해요.
6만 개의 모션 페어를 활용해 훈련했고, SAM3D-Body 메시 렌더링과 같은 고급 제어 중간체를 지원하는 등 새로운 기능이 발견돼요.