Яндекс представил бета-версию нейросети YandexART (Vi), с помощью которой пользователи могут создавать пятисекундные видеоролики. Шаблон доступен в приложении Masterpiece.
Предыдущая версия модели «Видео из текстового описания» позволяла создавать анимацию, в которой камера перемещалась, а объект — нет. Объекты генерации существенно менялись от кадра к кадру. ЯндексАРТ (Ви) научился воссоздавать реалистичные движения объектов, изображения незаметно сменяют друг друга и формируют плавное видео. Модель обучалась на видеороликах, содержащих движущиеся объекты.
Нейронная сеть понимает русский культурный код, а также использует специальный алгоритм распознавания текста для понимания пожеланий пользователя.
Вы можете протестировать модель в приложении Masterpiece. Нейросеть также используется в Яндекс Бизнесе, Директе, Браузере и Маркете. Кроме того, предприятия могут получить доступ к API YandexART в Яндекс Облаке.
Напомним, ранее в Masterpiece появилась возможность создавать клипы и добавлять в видеоролики музыку.
Источник: пресс-релиз Яндекса