iQIYI: студия ИИ фильма с живым актёром в Шанхае

iQIYI объявила, что открыла в Шанхае ИИ-киностудию, первую в Китае по её собственным словам. Актёры там играют вживую, а декорации, свет, костюмы и грим можно менять уже после съёмки. Первый проект, интернет-фильм «Cop in Trouble», снимают с 28 октября. Мне этот путь кажется трезвее полной генерации кадра, и ниже я разбираю, из чего он собран.

Актёр на маленькой сцене: слева декорация из тонкого контура, справа уже дорисованная моделью сцена
01

Что открылось в Шанхае

iQIYI, крупная китайская видеоплатформа, открыла ИИ-киностудию в своём Creative Center в Шанхае. Компания называет её первой в Китае. Проверить формулировку независимо в моменте нечем, и на разговор о методе это не влияет.

Площадку запустили не в презентационном режиме. Первый проект, интернет-фильм «Cop in Trouble», начали снимать 28 октября, за несколько дней до объявления. Пресс-релиз вышел на PR Newswire 1 ноября в 20:39 по восточному времени США, это 2 ноября, 03:39 по Москве.

02

Как устроена площадка на 110 квадратных метрах

Студия занимает около 110 квадратных метров. Внутри стоит мультикамерная схема: несколько камер пишут картинку, звук идёт синхронно и в высоком разрешении, а на площадке есть цифровой журнал непрерывности, где фиксируется, какой дубль к какой сцене относится.

Просмотр отснятого идёт прямо на месте, без ухода в монтаж. Мелочь на бумаге, но на практике именно она решает, сколько дублей проживёт смена: режиссёр видит кадр сразу, пока актёр ещё в костюме.

Схема конвейера: камеры снимают актёра, набор фонов дорисовывает сцену, человек остаётся прежним
03

Куда уходит отснятое: NadouPro и почти тридцать моделей

Материал автоматически попадает в NadouPro, платформу iQIYI для ИИ-производства кино и сериалов. Внутри почти 30 моделей, среди них Seedance 2.5 и Kling 4.0, плюс сотни агентов и навыков, которые закрывают отдельные шаги производства.

Схема получается конвейерной: живая съёмка даёт материал и игру, дальше платформа достраивает окружение. Для студии это означает, что смена моделей не требует пересъёмки. Один и тот же дубль можно провести через разные версии фона.

04

Создание видео с ИИ начинается после команды «стоп»

Здесь и лежит главный сдвиг. Декорации, свет, костюмы, грим и реквизит меняются после съёмки, а игра актёра остаётся нетронутой. Лян Чжу, вице-президент iQIYI и глава направления Intelligent Production, объясняет это так: игра актёра есть ядро фильма, и студия даёт режиссёру возможность её сохранить, а окружение менять свободнее.

Сюжет первого фильма под такой метод подходит спокойно: младший констебль Цзянь Чжан теряет славу и богатство, когда вскрывается его ложь вокруг поимки преступника. В центре история одного человека, и лицо в кадре останется человеческим, что бы ни менялось вокруг.

Именно это я и называю созданием видео с ИИ в его рабочей форме: модель не изобретает человека, она берёт на себя то, что человеку делать дорого и долго.

05

Почему ИИ фильм с живым актёром выглядит трезвее

Совсем недавно Sanxingdui, полностью сгенерированный фильм, провалился в прокате. Я писал об этом отдельно, и вывод там был невесёлый: картинка собрана, зритель не пришёл. iQIYI идёт противоположным маршрутом и оставляет в кадре живого человека.

Логика простая. Люди платят за лица, за паузу перед репликой, за взгляд, который невозможно посчитать. Модель уже умеет рисовать фактуру, свет и фактурный фон, а вот игру она пока имитирует. Если убрать актёра, у зрителя остаётся ровно то, что он видел в Sanxingdui, и второй раз за это он не заплатит.

Поэтому ставку на сохранение актёрской игры я считаю самой сильной частью объявления. Она выглядит как отказ от хайпа в пользу ремесла, и для рынка это хороший знак.

06

Нейросеть для создания видео из видео: где цифра тридцать процентов

У iQIYI уже была виртуальная студия в Хэндяне. По словам компании, она дала прирост эффективности производства больше чем на 30 процентов. Цифра звучит красиво и относится к другому проекту, независимой проверки у неё нет, так что я держу её как ориентир.

По «Cop in Trouble» не раскрыто почти ничего: бюджет, срок выхода, цена услуг студии. Это нормально для запуска, и всё же именно результат первого фильма покажет, работает ли схема. Здесь и живёт моё сомнение: пока никто не видел готовый кадр, выводы делать рано.

Технически же приём знаком каждому, кто работал с инструментом класса нейросеть для создания видео из видео: берётся реальный дубль, меняется окружение, сохраняется движение и мимика. Разница в масштабе: у iQIYI приём стоит на площадке, у остальных он живёт в ноутбуке.

07

Что из этого следует для заказчика ролика

Первое: гибрид проще контролировать. Съёмка человека занимает часы, а фон, город и погода пересобираются без выезда и без второй смены.

Второе: сценарий снова важнее инструмента. Если в кадре есть человек с задачей, любая модель лишь помогает, если человека нет, спасает только история, а истории у генераторов пока слабые.

Третье: не стоит ждать, пока студия приедет в ваш город. Тот же приём собирается из доступного набора: снять человека на нейтральном фоне, дорисовать окружение в модели, свести звук. Так делают видео нейросетями, когда в кадре нужен реальный сотрудник или эксперт.

Практический вывод простой. Для товара и короткой рекламы выгоднее снять живого человека и дорисовать мир вокруг: рекламный ролик с такой схемой выглядит дороже, чем есть на самом деле, а правка фона не требует новой смены. Для больших сцен, где людей нет вообще, генерация остаётся самым быстрым вариантом, и там стоит заранее заложить бюджет на перегенерации.

частые вопросы

01Что именно открыла iQIYI
ИИ-киностудию в своём Creative Center в Шанхае, компания называет её первой в Китае. Площадь около 110 квадратных метров, мультикамерная съёмка, синхронная запись видео и звука в высоком разрешении, цифровой журнал непрерывности и просмотр отснятого на площадке.
02Как работает связка студии и ИИ
Отснятый материал автоматически уходит в NadouPro, платформу iQIYI для ИИ-производства кино и сериалов. Там почти 30 моделей, включая Seedance 2.5 и Kling 4.0, и сотни агентов и навыков. Декорации, свет, костюмы, грим и реквизит меняются после съёмки, игра актёра остаётся.
03Что за фильм снимают первым
Интернет-фильм «Cop in Trouble», съёмки начались 28 октября. Сюжет про младшего констебля Цзянь Чжана, чьи слава и богатство рассыпаются, когда раскрывается его ложь вокруг поимки преступника. Бюджет и дата выхода не объявлены.
04Правда ли, что студия ускоряет производство на треть
iQIYI говорит, что предыдущая виртуальная студия в Хэндяне дала прирост эффективности больше 30 процентов. Это цифра компании и она относится к другому проекту. Результат «Cop in Trouble» пока никто не видел.