«Волшебник страны Оз», возможно, не первый цветной фильм, но многие люди помнят это из -за того, как режиссер Виктор Флеминг разумно использовал черно -белый фильм для этапов, происходящих в Канзасе.
Аналогичным образом, «Волшебник Оз» может быть не первым фильмом, который будет переосмыслен с помощью ИИ, но вскоре он может быть известен для этого.
В течение нескольких месяцев тысячи исследователей, программистов, художников с визуальными эффектами, архивистов и продюсеров из Google DeepMind, Google Cloud, Sphere Studios, Magnopus, Warner Bros. Discovery и других в кино и технологической отраслях работали, чтобы привлечь классику 1939 года на очень большой экране очень большим способом.
28 августа их работы дебютируют в сфере, колоссальном месте Лас -Вегаса, которое стало пионером новых форм развлечений с момента его открытия в сентябре 2023 года. Теперь генератор будет занимать переднюю часть сцены, наряду с Дороти, Тото и большим количеством Манчкинс, которые никогда не смогут адаптироваться в мультиплексе.
Это нормально для работы, которая когда -то разбила кинематографические ограничения. «Волшебник от Оз до сферы» является одинаково эпической компанией творчества и технологий, где история будет охватывать сферическое пространство с 17 600 местами для создания захватывающего сенсорного опыта.
Несколько лет назад такая компания была бы почти невозможна с обычным CGI. Это действительно стало возможным благодаря последним достижениям в генеративных моделях СМИ AI, в частности Imagen и Veo, Gemini также играет важную роль. Мало того, что команда должна создать глобальный опыт, но также должен сделать это только с оригинальным оборудованием. Не было добавлено ни одной строки нового диалога, или была вытекала нота новой музыки, обогащая эту классику для сферы.
«Мы говорили о том, чтобы делать это по -разному», — сказала Джейн Розенталь, продюсер Academy и Emmy Awards, которая является продюсером «Волшебника Оз в сфере». «Мы поняли, что мы действительно должны сделать это с ИИ».
Замечательные волшебники
Не то чтобы команда могла просто понять некоторые подсказки IA, нажать на их коллективные каблуки и позвонить в них однажды. Buzz Hays, главная роль в мире в решениях индустрии развлечений в Google Cloud и продюсер с 37 годами в Голливуде, подчеркивает, что это больше, чем использование ИИ для расширения старого фильма для нового формата.
«Мы начинаем с исходного изображения четыре на три на 35 -миллиметровой ячейке целлулоида — на самом деле это три отдельных и гранулированных негатива кино; вот как они стреляли в технику», — говорит Хейс. «Это, очевидно, не будет работать на экране в 160 000 квадратных футов. Поэтому мы работаем с Artists Sphere Studios, Magnopus и визуальными эффектами всего мира, наряду с нашими моделями ИИ, чтобы дать жизнь персонажам и оригинальным средам на совершенно новом холсте — создавая захватывающий опыт развлечений, который всегда уважает оригинал во всех отношениях».
Когда проект начался впервые, в команде было много, в том числе в Google, который открыто задавался вопросом, была ли технология ИИ еще не для завершения работы или выполнить коллективное видение группы. Но поскольку традиционный CGI не занимался бизнесом, по крайней мере, не без массовых расходов и лет работы — и потому что все были рады инновациям — они приступили к работе.
«Модели, они чрезвычайно инновационны», — сказал доктор Стивен Хиксон, исследователь Google DeepMind по проекту. «Мы найдем что -то, что мы не можем сделать, мы думаем, что это невозможно, а затем через месяц мы, на самом деле, мы можем это сделать».
Однако вы можете понять, почему это казалось невозможным.
Расширение оригинальных гранулированных изображений для светодиодного экрана сферы 16K — экрана с наибольшим разрешением в мире — было первым, но далеко не единственным вызовом. Команда также должна была учитывать все сокращения камеры в традиционном фильме, который удаляет персонажей из определенных частей определенных сцен, которые не будут работать в новом театральном масштабе, который предполагался. Обычный CGI, возможно, справился с проблемой масштабирования, но есть несколько способов эффективно заполнить остальные сцены.
Возьмите момент где сначала прыгает свободный лев на его будущих компаньонах. Камера происходит спереди к спине между чучелом и оловянным человеком, с дороти, прячущейся за деревом на расстоянии. Опыт сферы призван сохранить все эти элементы вместе в гиперреалистичных деталях.
Чтобы достичь этого, команда имеет три основных технических препятствий для преодоления.
Магия тонкой регулировки
Используя версии VEO, Imagen и Gemini, специально оплаченных за задачу, команды Google и их партнеры разработали инструмент «супер разрешения», основанный на ИИ, чтобы преобразовать эти крошечные целлулоидные рамки 1939 года в определение ультра-утры, которое появилось в сфере. Затем команды создают область подозреваемого ИИ, чтобы расширить объем сцен, чтобы заполнить пространство и заполнить зазоры, созданные порезами камеры, и рамки кадрирования. Наконец, благодаря генерации производительности, они включают композиты этих известных выступлений в расширенных условиях.
Вместе эти методы помогают достичь естественных жестов, постановки и мелких деталей, которые у обычного CGI возникают проблемы со счетом.
«Когда к нам пришла просьба, я прыгнул почти сверху вниз», — сказал доктор Ирфан Эсса, главный исследователь Google DeepMind и директор своей лаборатории Атланты. «Это лучшая возможность представить магию, которую мы разрабатываем с помощью ИИ».
Однако для всех новых мощных технологий, поставленных на карту, один из величайших прорывов только что последовал за традициями кино: иметь много дополнительного оборудования для работы. В дополнение к старым последовательностям команда путешествовала по архивам, чтобы создать большую коллекцию дополнительных документов, таких как сценарий стрельбы, производственные иллюстрации, фотографии, планы и результаты.
Через процесс называется тонкая настройкаЭти материалы загружаются на VEO и Близнецах, так что модели могут обучать конкретные детали исходных символов, их среды и даже элементов производства, таких как фокусное расстояние камеры для определенных сцен.
С гораздо большим количеством исходного материала, чем 102 -минутная пленка для работы, качество выходов значительно улучшилось. Теперь веснушки Дороти поставлены, и Тото может проскользнуть более прозрачно через больше сцен. Каждое изменение, отмечает Хейс, проводилось в тесном сотрудничестве с Warner Bros., чтобы обеспечить непрерывность духа оригинала.
Следуйте по коду желтого кирпича
В то время как команда продолжает свою поездку с этим действительно больше, чем жизнь, многие всегда впечатлены целым — и в восторге от того, что еще не впереди.
«Когда у вас есть инновации, вы не всегда знаете, куда они пойдут», — объясняет Джим Долан, председатель и генеральный директор Sphere Entertainment. «Вы должны быть в состоянии сделать акт веры. То, что вы увидите в« Волшебнике страны Оз в сфере », явно является актом веры».
