GenRecon은 다중 뷰 RGB 이미지에서 고품질 3D 장면을 재구성하는 새로운 기술입니다. 장면 재구성을 조건부 3D 생성을 통해 처리하며, 장면 전체를 타일링하는 중복된 청크를 사용합니다. Trellis.2와 같은 최첨단 생성 모델의 충실도와 완전성을 활용하여 장면 수준으로 일반화합니다.
투사 기반 조건부 메커니즘을 제안하여 다중 뷰 이미지 특징을 일관성 있는 3D 표현으로 들어올려 뷰 순서에 관계없이 장면과 공간적으로 고정하여 고품질의 다중 뷰 일관성 있는 생성 기하학을 얻습니다. 이를 통해 Trellis.2의 강력한 객체 수준의 사전 지식을 다중 뷰, 장면 규모의 생성을 위해 활용합니다.
GenRecon은 기존 재구성 방법보다 16% 높은 품질의 결과를 보여줍니다. 실시간 편집이 가능한 PBR 메쉬 재구성을 통해 실내 환경을 재구성합니다.