Adobe добавила в Premier Pro генеративное видео на основе ИИ
Главная прошлогодняя фишка Photoshop пришла и в видеоредактор.
Adobe Premiere сможет заменять, удалять и добавлять объекты в сцену, дорисовывать новые кадры и использовать сторонние нейросети в работе.
В основе лежит та же модель Firefly, которая встроена в Adobe Photoshop, но натренирована она именно на генерацию в видео. Модель хорошо работает с контекстом и использует его для генерации. Корректно заменяет бриллианты в чемодане, находит и убирает лишний объект с видео (правда, в статичном кадре) и добавляет кадру длины, генерируя его продолжение на основе предыдущего видеоряда.
Если полные кадры модель рисует всё ещё немного кринжово, то работа с отдельными элементами сцены чудо как хороша. Можно использовать модели от сторонних разработчиков: в ролике показали запуск Sora, Pika, Runway AI. Кажется, загружать свои собственные модели, как в том же Stable Diffusion, будет нельзя. Но ряд моделей может быть предустановлен в программу при сотрудничестве с партнёрами.
Посмотрите видео: выглядит как чёртова магия. Кремниевый мир победил, ИИ оказался достаточно убедительным.