Nanjing University, 비디오 재조명 프레임워크 Relit-LiVE — 사전 카메라 포즈 없이 물리적 일관성 유지

Nanjing University 팀이 비디오 재조명에서 물리적 일관성과 시간적 안정성을 개선한 Relit-LiVE를 공개했습니다. 기존 방식이 내재적 분해의 부정확성으로 인해 왜곡과 아티팩트를 겪는 반면, Relit-LiVE는 원본 참조 이미지를 렌더링 과정에 명시적으로 도입하고 환경 비디오 예측을 통해 동적 조명과 카메라 움직임을 지원합니다. 합성 및 실제 벤치마크에서 SOTA를 능가하며, 장면 렌더링, 재질 편집, 객체 삽입 등 다양한 다운스트림 작업에도 적용 가능합니다. 코드는 공개되었습니다.

• #video-relighting
• #diffusion
• #neural-rendering
• #nju