Vis2Reg는 시야 정보를 활용해 3D 모델과 복강경 수술 중 보이는 2D 표면을 정렬하는 새로운 프레임워크입니다. 복강경 수술 시 심한 가려움, 제한된 시야, 3D 데이터 부족 문제를 해결합니다.
가려움이 심한 상황에서도 견고한 자체 감독을 가능하게 하는 가시성 기반 자체 감독 방법을 도입했습니다. 가시성 마스크에서 3D 감독 신호를 파생시켜 차등 점 래스터화 및 마스크 기반 역 투영을 활용합니다.
실제 복강경 데이터 세트에서 Dice 점수 92.6%, Chamfer 거리 1.43mm를 달성하며 프레임당 111ms의 효율적인 추론 속도를 보입니다.