Lumos-Nexus: 비디오 통합 모델을 위한 동질적 잠재 공간을 통한 효율적인 주파수 브리징

Lumos-Nexus는 학습 효율을 높인 2단계 통합 비디오 생성 프레임워크다.

먼저 이해 블록을 갖춘 경량 생성기를 학습한 뒤, 추론 시 Unified Progressive Frequency Bridging으로 공유 잠재공간에서 고용량 사전학습 모델로 생성을 전이한다.

이 방식은 VBench에서 사실감과 시간적 일관성을 개선하면서도 추론 기반 제어를 유지했다.

또한 연구진은 의도를 일관되고 의미적으로 맞는 영상으로 얼마나 잘 바꾸는지 평가하는 VR-Bench를 제안했다.