연구진은 복잡한 조건 하에서 짧은 비디오만 생성하는 기존 HOI 비디오 생성 방법의 한계를 극복하기 위해 실시간 인터랙티브 애플리케이션에 적합한 StreamHOI 프레임워크를 개발했어요.
StreamHOI는 이미지-비디오 스트리밍 생성기가 상호작용을 유지하기 위해 역사적 메모리를 어떻게 구성해야 하는지 연구하여, 표준 메모리 설계의 한계를 극복하고 블록별 메모리 레이아웃에 맞게 생성기를 적응시켰어요.
실험 결과 StreamHOI는 17.6 FPS의 속도로 0.75초의 초기 청크 지연으로 강력한 상호작용의 타당성, 객체 충실도, 인간의 품질, 효율성을 달성했어요.