EgoPhys는 로봇이 변형 물체의 움직임을 예측하고 제어할 수 있도록 돕는 프레임워크입니다. 로봇은 RGB 영상만으로 변형 물체의 디지털 트윈을 생성하여 현실 세계와 시뮬레이션 환경 간의 연결을 가능하게 합니다.
기존 방법의 한계를 극복하고, 각 물체에 대한 역물리 솔루션을 간결한 코드북에 담아, 개별 스프링 테스트 없이도 새로운 물체의 밀도 기반 스프링 강성 필드를 예측할 수 있습니다.
실제 로봇에 EgoPhys를 적용하여, 단일 RGB 영상으로 초기화된 디지털 트윈이 변형 물체 계획에 도움을 주는 것을 확인했습니다.