В Избранное
ИИ от Netflix удаляет объекты из видео и меняет физику окружения
4 апреля

ИИ от Netflix удаляет объекты из видео и меняет физику окружения


Netflix опубликовал нейросеть VOID (Video Object and Interaction Deletion). В отличие от существующих аналогичных видео ИИ-редакторов, модель способна удалять не только сами объекты, их тени или отражения, но и физические последствия их присутствия в кадре.

Например, при удалении одной из машин за секунду до аварии, вторая продолжит движение прямо. Если убрать из кадра человека, держащего предмет, предмет не останется висеть в воздухе, а при удалении центрального блока из падающего домино цепная реакция остановится.

Работа пайплайна строится на объединении двух моделей. Сначала визуально-языковая модель анализирует сцену и создаёт маску для областей, которые должны изменить траекторию. Затем видео-диффузионная модель перерисовывает кадры с учётом физики. Для защиты от потери геометрии («морфинга») предусмотрен опциональный второй проход с использованием векторов движения для фиксации формы предметов.

Нейросеть обучалась на специально сгенерированных синтетических датасетах Kubric и HUMOTO. Исходный код и веса модели размером 22,3 ГБ выложены на GitHub и Hugging Face, там же доступно рабочее демо.

Источник

Подписывайтесь на наши соц. сети и получайте больше новостей!

Комментарии

Shumer 4 апреля
Так вот куда люди пропадают) матрица

Содержание

В начало
Комментарии

Ubisoft меняется: новые альянсы и фокус на инновациях

RTX Remix оживляет Dark Souls: мод с трассировкой пути, улучшенными текстурами и DLSS 5

Crimson Desert — абсолютный триумфатор Korea Game Awards 2026: 8 наград и статус глобального хита

Toto’s Journey: отечественная сказка покоряет Steam!

Уоррен Спектор о GTA VI и миллиардном бюджете игры

GTA VI получила 99 баллов на Metacritic

«Ковены Умбрии»: Path of Exile получила крупное обновление, а разработчики уже готовят правки

Крейг Хьюстон покинул Treyarch после реструктуризации


Сайт может использовать файлы cookie для работы, улучшения сервиса и показа персональных предложений. Подробнее об этом в Политике конфиденциальности.
Продолжая использовать сайт, Вы соглашаетесь с Условиями использования и Политикой cookie.
Закрыть
licnt20A2