OmniTacTune은 촉각 피드백을 활용해 시각 정책을 개선하는 강화학습 파이프라인입니다. 기존 시각 정책은 접촉이 많은 작업에서 실패하는 경우가 많았는데, OmniTacTune은 이를 해결합니다. 이 파이프라인은 자율적인 정책 실행을 통해 촉각 학습을 시작하고, 온라인 상호작용을 통해 가벼운 촉각 잔류 정책을 학습합니다.
4가지 실세계 작업에서 OmniTacTune은 시각 정책의 성공률을 5~40%에서 85~100%로 향상시켰습니다. 40~80분 내에 성공률을 높이는 효율적인 방법입니다. 프로젝트 페이지는 GitHub에서 확인할 수 있습니다.