Этот день заканчивается буквой Y, поэтому новый генератор видео с искусственным интеллектом присоединяется к постоянно растущей массе подобных инструментов. Alibaba является последним участником этой отрасли со своей новой моделью преобразования текста в видео, которая является частью ее портфолио Tongyi Wanxiang. Видеоинструмент искусственного интеллекта, анонсированный на конференции Alibaba Cloud Apsara, был лишь частью лавины новых вариантов искусственного интеллекта от китайского технологического гиганта, включая более 100 новых больших языковых моделей (LLM).
Tongyi Wanxiang — это коллекция моделей генерации синтетических медиа от Alibaba, которая началась в прошлом году с создателя изображений с использованием искусственного интеллекта. Новый инструмент будет создавать высококачественные видеоролики на основе текстовых подсказок на китайском и английском языках, а также фотографий. Руководители Alibaba похвастались, что компания обладает одной из самых передовых архитектур диффузионного преобразователя (DiT), позволяющей создавать видео, сохраняющее свое качество независимо от стиля, который желает пользователь, включая реалистичное живое действие и множество стилей анимации.
Alibaba не уделила слишком много времени тому, как они представляют себе пользователей, использующих видеопроизводитель с искусственным интеллектом, но акцент на партнерстве со сторонними организациями говорит о многом. Эту технологию можно использовать в ряде маркетинговых и развлекательных видеороликов. Его также можно использовать в видеоиграх для создания визуальных отсылок или даже целых вступительных видеороликов.
Видели Сору?
Огромное количество видеогенераторов искусственного интеллекта, которые уже существуют или скоро появятся, поражает, учитывая, что еще недавно ни один из них не существовал на потребительском уровне. OpenAI привлек большое внимание к этой идее с помощью своей модели Sora. Однако решение компании ограничить Sora определенными партнерами заставило многих людей искать альтернативы, и такие компании, как Alibaba, рады заполнить некоторые из этих пробелов.
Runway, Stability AI, Pika, Hotshot и Dream Machine от Luma Labs — лишь некоторые из самых известных примеров. И Alibaba — не единственный китайский конкурент. Клинг и Джимэн из владельца TikTok Bytedance участвуют в одной гонке. Alibaba объявила о мерах, но окончательный вариант с указанием победителей и проигравших еще не снят.