Модель для генерации видео от первого лица из панорамной сцены по одному изображению.
AlayaVista строит по одному изображению панорамную 360-градусную сцену, а затем в реальном времени генерирует видео с точки зрения, которую выбирает пользователь, управляя камерой. Использует потоковую генерацию по частям и упрощённую (дистиллированную) модель для скорости. На момент публикации доступны только страница проекта и техническое описание, код и веса модели ещё не выложены.
Описание автора:AlayaVista: Streaming World Modeling from Panoramic States to Perspective Video.
