Новый фильм Земекиса использовал искусственный интеллект для омоложения Тома Хэнкса и Робин Райт

В пятницу TriStar Pictures выпустила Here, фильм стоимостью 50 миллионов долларов, снятый Робертом Земекисом, в котором использовались методы генеративной трансформации лиц в реальном времени с помощью ИИ для изображения актеров Тома Хэнкса и Робин Райт на протяжении 60 лет, что стало одним из первых полнометражных фильмов Голливуда, созданных на основе визуальных эффектов с использованием ИИ.

Фильм адаптирует графический роман 2014 года, действие которого происходит в основном в гостиной Нью-Джерси в течение нескольких временных периодов. Вместо того чтобы подбирать разных актеров для разных возрастов, производство использовало ИИ для изменения внешности Хэнкса и Райта на протяжении всего фильма.

Технология омоложения разработана Metaphysic, компанией по визуальным эффектам, которая создает эффекты замены лиц и старения в реальном времени. Во время съемок съемочная группа одновременно смотрела на два монитора: один показывал реальную внешность актеров, а другой — в том возрасте, который требовала сцена. Metaphysic разработала систему модификации лиц, обучая пользовательские модели машинного обучения на кадрах предыдущих фильмов Хэнкса и Райта. Это включало большой набор данных о движениях лица, текстурах кожи и внешнем виде при различных условиях освещения и ракурсах камеры. Полученные модели могут генерировать мгновенные преобразования лица без месяцев ручной пост-обработки, требуемой традиционной CGI.

В отличие от предыдущих эффектов старения, которые полагались на покадровую манипуляцию, подход Metaphysic генерирует преобразования мгновенно, анализируя ориентиры лица и сопоставляя их с обученными возрастными изменениями.

«Вы не могли снять этот фильм три года назад», — сказал Земекис The New York Times в подробном материале о фильме. Сообщается, что традиционные визуальные эффекты для такого уровня модификации лица потребовали бы сотен художников и существенно большего бюджета, близкого к стандартным затратам на фильмы Marvel. Это не первый фильм, в котором использовались методы ИИ для омоложения актеров. Подход ILM к омоложению Харрисона Форда в фильме 2023 года «Индиана Джонс и циферблат судьбы» использовал запатентованную систему Flux с инфракрасными камерами для захвата данных о лице во время съемок, а затем старые изображения Форда для омоложения на этапе пост-обработки. Напротив, модели искусственного интеллекта Metaphysic обрабатывают преобразования без дополнительного оборудования и демонстрируют результаты во время съемок.