Adobe анонсировала свои будущие инструменты искусственного интеллекта для видео в недавнем посте на YouTube, которые являются частью видеомодели Firefly, которую компания анонсировала в апреле. Ожидается, что эти функции (и модель) будут доступны к концу года и будут доступны как в бета-версии приложения Premiere Pro, так и на бесплатном веб-сайте.

Компания представила три новые функции, которые в настоящее время находятся в закрытой бета-версии, но будут выпущены для широкой публики позднее в этом году: Generative Extend, Text to Video и Image to Video. Generative Extend расширяет любое входное видео до двух секунд, а функции преобразования текста и изображения в видео позволяют пользователям создавать пятисекундные клипы высокого разрешения со словесными и графическими подсказками.

Затем вы можете редактировать и изменять эти видео, настроив элементы управления камерой, чтобы изменить углы камеры, ее движение и расстояние съемки. И в отличие от Грока, ограничения Firefly блокируют создание контента, содержащего наготу, наркотики и алкоголь.

Generative Extend будет выпущен позднее в этом году как часть бета-версии Premiere Pro, а Text and Image to Video будет доступен на веб-сайте Firefly. Последние два должны быть доступны пользователям бесплатной версии, хотя, вероятно, с ограничениями на использование. Сообщается, что компания планирует окончательно интегрировать функции генерации видео в оставшиеся приложения Creative Cloud, Experience Cloud и Adobe Express.

Adobe описывает создание изображений и видео Firefly как «коммерчески безопасное», поскольку модель была обучена исключительно на лицензированном, общедоступном контенте и контенте Adobe Stock.

Судя по тизерному видео выше, предстоящие видеофункции Firefly кажутся такими же, как у Sora от OpenAI (которая сама еще не выпущена), Kling от Kuaishou Technology и модели Gen-3 Alpha от Runay. Это, конечно, выглядит значительно лучше и гораздо менее галлюцинаторно, чем то, что могут создать множество бесплатных видеогенераторов, доступных в настоящее время в Интернете.

Сообщается, что Midjourney также работает над моделью преобразования текста в видео. Генеральный директор и основатель Дэвид Хольц сказал в «Часы консультацийНа сессии Discord в декабре 2023 года было объявлено, что модель будет выпущена через «несколько месяцев», но с тех пор никаких обновлений не выпускалось.