Что Runway выкатила 29 октября
Приложение Character Swap появилось в App Studio 29 октября. Оно берёт готовый ролик и меняет в нём персонажей или локацию, а исходное движение сохраняет: шаг, поворот, жест остаются от съёмки. Звук можно перенести на новую сцену, и его же можно заменить, если сцена поменялась.
Анонс в X вышел 30 октября, то есть на следующий день после появления приложения. Цифр в источнике нет: ни цены, ни лимита по длине ролика, ни числа попыток на тарифе. Придумывать эти значения я не буду. Если считаете смету, спрашивайте у Runway напрямую, у App Studio сетка тарифов может отличаться от обычной подписки на генерации.
App Studio: приложение из одного описания
Контекст здесь важнее самого анонса. App Studio Runway запустила 26 октября, за три дня до Character Swap. Логика такая: пользователь описывает креативное приложение словами, Runway собирает его без кода, внутри работают модели Runway и Brand Kits, готовое приложение можно отдать команде.
Character Swap это одно из таких приложений. Значит замена персонажа приезжает сборкой по описанию, и под свою задачу её можно докрутить. Отдельной кнопки в редакторе у неё нет. Механику конструктора я разбирал отдельно в статье про App Studio, там шаги расписаны по порядку.
Runway нейросеть: три релиза за неделю
Неделя у Runway плотная, и по ней видно направление. 27 октября Runway Ads вышли на всех платных тарифах. 28 октября появился плагин Runway Dev для Codex: API Runway встраивается в своё приложение одной установкой. 29 октября Character Swap. 30 октября анонс в X.
Картина простая. Runway достраивает обвязку вокруг моделей: реклама для площадок, код для разработчиков, конструктор приложений для продакшена. Замена персонажа встаёт в этот ряд как прикладная функция внутри общего конструктора. Отдельного продукта со своей подпиской у неё нет.
ИИ видео из видео: зачем переигрывать дубль
Смысл Character Swap для заказчика укладывается в одно слово: пересъёмка. Ролик снят, персонаж сыграл, свет поставлен, а через неделю клиент хочет другого героя или другое место. Раньше это новый съёмочный день: площадка, свет, человек, повтор движения. Теперь тот же дубль переигрывается с другим персонажем и в другой локации, движение остаётся от исходника.
Для рекламы экономия прямая: одна съёмка, пять персонажей под пять аудиторий. Для локализации то же самое, ведущий один, а сцены под страны разные. В теме видео из видео меня цепляет именно это: узким местом перестаёт быть площадка.
Как это устроено под капотом, я разбирал в материале про ИИ видео из видео: модель получает исходный ролик и референсы, потом перерисовывает сцену целиком. Character Swap делает то же самое, только замена персонажа и локации вынесена в готовое приложение.
Замена персонажа в видео нейросетью: где ломается
Руки и быстрые движения остаются слабым местом. Пальцы на крупном плане, взмах в кадре, бег, танец, работа с предметом: кисть модель дорисовывает по-своему, и на движении это видно как слипание или лишний палец.
Второе место, стыки. Когда персонаж проходит за колонной или его перекрывает другой человек, маска рвётся, и на выходе получается шов.
Третье, отражения и тени. Новая локация приносит свой свет, а тень от персонажа остаётся от старой сцены. На полу в кадре это заметно сразу.
Проверять всё это можно только на своём материале. Берите пять-шесть своих сцен: крупный план с жестом, средний с проходом, сцену с быстрым движением, сцену с перекрытием, съёмку у окна и общий план с глубокой перспективой. Такая выборка показывает за вечер, где именно модель ломается на вашей фактуре, и сколько брака вы получите на серии из тридцати роликов.
Люди в кадре и согласие
Замена персонажа упирается в то же, что и замена лица на видео: человек в кадре должен согласиться. Если героя меняют на другого, документы нужны с обеих сторон, у того, кого убирают, и у того, кто появляется. Без согласия человек вправе требовать удаления материала, нормы и практику я разбирал в статье про замену лица.
Локация проще, чем человек, но не всегда. Частная территория, чужой интерьер, узнаваемый фасад подтягивают вопрос доступа к съёмке. Фон в видео меняют по похожим правилам, и об этом у меня есть отдельный разбор про замену фона.
Мой вывод: тест на своём материале
Character Swap это инструмент для второго и третьего варианта одного дубля. Один ролик он не спасает, зато снимает нужду в повторной съёмке, когда меняется герой или место.
Что бы я сделал на месте продакшена. Прогнал свои пять сцен, посчитал процент брака, и только потом ставил инструмент в поток. Character Swap живёт внутри App Studio, а конструктор меняется быстро: сегодня приложение собирается по описанию, через месяц условия могут быть другими.
По деньгам расклад прежний: вертикальная реклама с десятком версий требует шаблона и предсказуемой цены за штуку. Там, где в кадре нужен живой человек и его лицо держит доверие, спокойнее работают ручные ролики от 16 000 рублей: цена известна заранее и не зависит от числа попыток.
Практический старт короткий. Снимите одну сцену с движением рук, прогоните её через Character Swap с новой локацией, посмотрите на кисти и тени. Результат этого теста скажет больше, чем любой анонс.
