Новости нейросетей для видео: выпуск 10 ноября

10 ноября Beeble показала SwitchX 3.0 для замены фона и света на снятом видео, 9 ноября DeepBrain выкатила чат-агента Video Agent, Adobe подписала альянс с Disney, TikTok открыла токены BytePlus для Seedance, NVIDIA выложила апскейлер для MiniMax H3. Плюс два иска к Suno и один слух про Alibaba.

Актёр зафиксирован в оранжевой альфе, а панели фона и света меняются вокруг него по дуге
01

SwitchX 3.0: меняется мир вокруг актёра

10 ноября Beeble выпустила SwitchX 3.0, модель video-to-video для замены фона и света на уже снятом материале. Внутри она пересобрана на базе открытой MiniMax H3, то есть новая версия стоит на чужой открытой основе.

Ключевой приём в описании один: Source-Locked Rendering. Игра актёра внутри альфы фиксируется пиксель в пиксель, модель трогает только мир и свет. Для рекламы это снимает главную боль замены локации, потому что переснимать человека не нужно и мимика остаётся исходной.

Новое в третьей версии: до 4 референс-картинок, движущийся фон, трекинг камеры без маркеров и управление событиями сцены промптом. Выход 4K и 10 бит. Работает в облачном приложении Beeble.

Почему это важно: в версии 2.0 фон двигался заметно меньше, теперь за спиной идёт транспорт, толпа, снег. Движущийся фон и свободная камера переводят замену локации в обычный инструмент для серийных роликов.

02

DeepBrain AI Studios 5.0: видео из документа через чат

9 ноября корейская DeepBrain AI показала AI Studios 5.0 с чат-агентом Video Agent. Агент берёт описание, документ, ссылку или готовый сценарий и собирает видео: текст, сцены, озвучка и аватары.

Новый тариф Personal идёт с единым балансом кредитов, около 2 440 ₽ в месяц, в пакете 700 кредитов. Смысл единого баланса в том, что кредиты не привязаны к отдельной функции и тратятся на то, что нужно в проекте.

Почему это важно: вход через документ убирает этап сборки раскадровки руками. Для обучающих роликов и коротких презентаций это часы, которые раньше уходили на разметку сцен.

Схема пайплайна: кадр на плёнке, заблокированный актёр, смена слоёв фона и света, камера, выход в высоком разрешении
03

Adobe и Disney: собственные модели на своих персонажах

9 ноября на Adobe MAX в Майами-Бич Adobe объявила многолетний альянс с Disney и получила статус Official AI Innovation Partner. Disney строит собственные модели в Adobe Firefly Foundry, на своих персонажах, мирах и стилях.

Первое применение уже есть: R&D подразделения Imagineering работает с моделью sketch-to-image, которая превращает эскиз в 2D-концепт-арт. Конференция Adobe MAX идёт с 10 по 12 ноября.

Почему это важно: крупный правообладатель получает модели, обученные на своём материале, и перестаёт зависеть от чужой генерации в вопросах стиля. Студиям поменьше это подсказывает развилку: либо своя модель, либо аккуратная работа с лицензиями чужих.

04

TikTok Symphony: токены BytePlus для Seedance

С 9 ноября рекламодатели вне Северной Америки могут покупать токены BytePlus для моделей Dreamina Seedance прямо внутри Symphony. Заодно обновили Symphony API для своих креативных систем.

Что Seedance уже даёт в Symphony с августа: ролики до 30 секунд и до 50 референсов, куда входят изображения, видео и аудио.

Почему это важно: оплата токенами внутри рекламного кабинета упрощает тесты. Креативы на 30 секунд с полусотней референсов можно гонять пачками и проверять гипотезы быстрее.

05

NVIDIA: черновик MiniMax H3 в 2K и 4K

9 ноября команда Sana из NVIDIA выложила Open-H3-Regenerate-2K-IC, открытый IC LoRA. Он перерисовывает черновик MiniMax H3 в 768p в 1080p, 2K или 4K и держит при этом лица, липсинк, надписи и раскладку кадра. Звук черновика переносится без изменений.

Лицензия MiniMax H3 Community License исключает ЕС, Великобританию, Корею и США, так что для части рынков этот путь закрыт юридически. Это продолжение версии от 28 октября, разбор про Open-H3 Regenerate 2K у нас уже был.

Почему это важно: апскейл черновика дешевле повторной генерации в высоком разрешении, и теперь его можно считать шагом пайплайна. Проверять стоит на кадрах с надписями, там апскейлеры чаще всего ломают буквы.

06

Слух: Alibaba обещает видеомодель в ноябре

По отчётам QbitAI и Shanghai Securities News с конференции Alibaba 22 сентября, видеомодель следующего поколения должна выйти в ноябре: длиннее, управляемее, с «режиссёрским» пониманием сюжета. На 9 ноября официального релиза нет, об этом пишет each::labs.

Названия, характеристик и цены нет, поэтому до запуска это слух. Смету на декабрь под него перестраивать рано.

Почему это важно: если срок подтвердится, ноябрь даст ещё одну длинную модель в общий доступ. Пока единственное, что можно сделать, это держать тестовую сцену наготове.

07

Иски к Suno: Элвис и Эминем

9 ноября Los Angeles Times сообщила о двух новых исках в Северном округе Калифорнии. Первый подали правообладатели Элвиса Пресли, ущерб в нём оценивают больше чем в 4,2 млрд ₽, и это один из первых тестов закона ELVIS Act. Второй иск подал издатель Eight Mile Style, речь про ранние хиты Эминема, около 3,4 млрд ₽.

Suno обвинения отрицает. Иски касаются обучения и генерации, а для пользователя вывод один: у трека из генератора есть свой юридический риск.

Почему это важно: музыка из генератора стала отдельной строкой в проверке прав. Для коммерческого ролика это повод смотреть лицензию сервиса до первой генерации.

08

ИИ видео новости: что меняется в работе

День получился про правку уже снятого и про права. Модели учатся менять мир вокруг актёра: SwitchX держит человека в альфе, NVIDIA поднимает черновик до 4K. Бренды заводят свои модели, как Disney в Firefly Foundry. Музыка из генератора при этом стала юридическим риском, и два иска к Suno это подтверждают.

Практический вывод простой. Для коммерческого ролика проверяем лицензию до первой генерации. Апскейл черновика теперь часть пайплайна наравне с монтажом. Замену фона планируем на этапе съёмки, чтобы актёрская игра осталась исходной.

Если ролик собирается партиями, вертикальная реклама и поток через видео нейросетями держатся на одном: исходник снят один раз, версии собираются в модели. Там, где нужен финальный кадр и ответственность за мимику, у нас есть ручные ролики от 16 000 ₽. Предыдущий выпуск 7 ноября был про Micro Drama Ads у Higgsfield, Core Studio, Wizshot 1.0 и Ads Engine у ElevenLabs, его стоит читать вместе с этим.

частые вопросы

01Что нового в SwitchX 3.0
Модель video-to-video для замены фона и света на снятом видео, пересобрана на открытой MiniMax H3. Source-Locked Rendering держит игру актёра пиксель в пиксель. Добавили до 4 референс-картинок, движущийся фон, трекинг камеры без маркеров и управление событиями сцены промптом. Выход 4K и 10 бит.
02Сколько стоит DeepBrain AI Studios 5.0
Тариф Personal с единым балансом кредитов стоит около 2 440 ₽ в месяц, в пакет входит 700 кредитов.
03Какие иски получила Suno
Два иска в Северном округе Калифорнии, о которых 9 ноября написала Los Angeles Times: от правообладателей Элвиса Пресли с ущербом больше 4,2 млрд ₽ и от издателя Eight Mile Style про ранние хиты Эминема на 3,4 млрд ₽. Suno обвинения отрицает.
04Вышла ли новая видеомодель Alibaba
На 9 ноября нет. По отчётам с конференции 22 сентября запуск ждали в ноябре, но официального релиза и характеристик нет, это слух.