Он не только генерирует новый контент, но и умеет редактировать готовые видеоролики.
Новый продукт Google VideoPoet основан на большой языковой модели LLM. Для обучения нейросети разработчики использовали более 270 миллионов видеороликов. Языковая модель также включала 1 миллиард парных текстов и графических изображений.
Благодаря такому подходу к обучению VideoPoet может работать в разных стилях, управлять камерой и генерировать аудиофайлы на основе видео. Доступен формат вертикального видео, известный по Shorts, Reels и TikTok.

В отличие от других подобных инструментов, нейронная сеть Google может редактировать существующие видео. Предварительное пользовательское тестирование показало высокие оценки. VideoPoet особенно хвалят за способность следовать текстовым инструкциям.
Разработчики пока не объявили точную дату релиза.