연구진은 시각 정보에서 내부 생체역학적 상태를 직접 추론하는 데 어려움이 있다는 점에 주목했어요. BioHuman10M이라는 대규모 데이터셋을 공개했는데, 이는 동영상, 모션, 활성화를 동기화한 데이터입니다. BioHuman 모델은 단안 동영상을 입력으로 받아 인간의 움직임과 근육 활성화를 동시에 예측하여 시각 관찰과 내부 생체역학적 상태를 연결합니다.
BioHuman 모델은 기존의 운동학적 움직임뿐만 아니라 근육 활동도 정확하게 재구성할 수 있으며, 다양한 피험자와 움직임에 걸쳐 일반화되는 것으로 나타났어요. 연구진은 이 접근법이 비디오 기반 생체역학적 이해에 새로운 벤치마크를 제시한다고 믿고 있습니다.
BioHuman은 시뮬레이션 기반 프레임워크를 사용하여 기존 모션 캡처 데이터셋에서 근육 활성화를 추정하여 생성되었으며, 이는 인간 모델링에 새로운 가능성을 열어줄 것으로 기대됩니다.