Stream-T1: 테스트-타임 스케일링으로 스트리밍 비디오 생성의 시간적 일관성 향상

FrameX-AI 팀이 스트리밍 비디오 생성을 위한 테스트-타임 스케일링(TTS) 프레임워크 Stream-T1을 제안했습니다. 기존 확산 기반 TTS는 후보 탐색 비용이 크고 시간적 안내가 부족했지만, 스트리밍 비디오의 청크 단위 합성과 적은 디노이징 스텝을 활용해 계산 부담을 낮추고 미세한 시간적 제어를 가능하게 했습니다. Stream-T1은 세 가지 구성 요소(잡음 전파, 보상 기반 가지치기, 메모리 싱킹)를 통해 5초 및 30초 벤치마크에서 시간적 일관성, 움직임 부드러움, 프레임 품질을 크게 개선했습니다. 단, 이 접근법은 스트리밍 비디오 생성에 특화되어 있어 일반 비디오 생성에는 직접 적용하기 어려울 수 있습니다.

• #video-generation
• #test-time-scaling
• #streaming
• #diffusion