Конец эпохи Голливуда? Гайд по генерации видео в Seedance 2.0

Seedance — это семейство видеомоделей от ByteDance, компании, стоящей за TikTok и CapCut. 

Команда заявляет, что Seedance 2.0 значительно превосходит версию 1.5 в качестве генерации. Новая модель упрощает работу со сложными сценами взаимодействия и движения, а также значительно повышает физическую точность, визуальную реалистичность и управляемость.

Это достигается за счет таких технических характеристик:

• мультимодальная система референсов: можно загружать до 9 изображений, 3 видео и 3 аудиофайлов одновременно для управления генерацией;
• встроенный звук: модель генерирует видео сразу с аудиосопровождением, включая эффекты (SFX), фоновые шумы и синхронизацию губ с речью;
• стабильность персонажей: удержание внешности героя и деталей одежды на протяжении нескольких кадров;
• физика движений: улучшено взаимодействие объектов (падение и столкновения предметов, мимика людей).

Модель поддерживает генерацию 15-секундного видео с несколькими сценами и двухканальным звуком.

Чтобы сравнить возможности Seedance 2.0 с конкурентами, команда ByteDance совместно с экспертами из кино- и телеиндустрии разработала собственный оценочный набор стандартов, охватывающих генерацию аудио/видео и монтаж.

Согласно проведенному ими оцениванию, Seedance 2.0 находится в авангарде отрасли видеопроизводства.

К такому же выводу приходит агентство CTOL: Seedance 2.0 на практике показывает результаты лучше, чем Sora 2 и Veo 3.1. 

Хоть на момент создания материала дата официального запуска Seedance 2.0 еще не объявлена, инструмент уже можно протестировать на платформе SJinn.

1. Перейдите на sjinn.ai и зарегистрируйтесь с помощью аккаунта Google или электронной почты.

2. Откройте страницу Seedance 2.0.

На ней вы увидите несколько блоков:

• Select Mode — из выпадающего меню выберите Seedance 2.0 video;
• Reference Images — загрузка до 6 изображений-референсов (опционально);
• Reference Videos — загрузка до 3 видео-референсов (опционально);
• Prompt — текстовое описание видео;
• Aspect Ratio — формат кадра (16:9, 9:16, 1:1, 4:3, 3:4);
• Duration — длительность от 4 до 15 секунд.

3.1. Создание видео по текстовому запросу.

Самый простой сценарий — описываете сцену, модель генерирует видео. 

Подсказка: запрос пишите структурировано:  тип кадра → главный объект → действие → окружение → освещение → стиль → движение камеры.

Пример: 

Киносцена с живыми актерами. Женщина в номере мотеля. Неоновая вывеска гудит снаружи. Тишина. Она выглядывает сквозь жалюзи на пустую парковку. Фары медленно скользят по стене. Она затаивает дыхание, шагая в тень. Машина проезжает мимо, не останавливаясь. Она выдыхает, опускается на колени и отодвигает старую вентиляционную решетку. Кадры внутри: светящийся красный ключ. Она запихивает его в рюкзак и бормочет: «Еще одна ночь». Она хватает куртку и выходит.

3.2. Генерация с референс-изображением:

• загрузите изображение в блок Reference Images — файл получит №1 (далее 2, 3 т.д.);
• в текстовом запросе сошлитесь на него: «@Image1 в качестве логотипа»;
• опишите действие, окружение, движение камеры;
• выберите формат и длительность, нажмите Generate;
• результат появится в блоке Your Results справа примерно через 5–10 минут.

Пример: 

Стиль: Киберпанк-футуристический город, холодная дождливая ночь, неоновые огни.

Сцена 1: Крупный план. Изящный серебристый суперкар стоит неподвижно на залитой неоновым светом дождливой ночной улице. Капли дождя стекают по его гладкой краске, отражая красные задние фонари.

Логотип @Image1 на передней части автомобиля светится едва заметным мерцающим светом. Среди какофонии гудков автомобиль остается беззвучным.

Сцена 2: Сверхкрупный план.

Действие: Переключение режимов. Изнутри колес раздается механический звук, когда они поворачиваются вниз на 90 градусов, открывая внутренние реактивные форсунки.

Спецэффекты: Жутковатые синие плазменные двигатели мгновенно загораются, испаряя лужи с дороги в белый туман. Автомобиль плавно левитирует вертикально под возгласы изумления.

Сцена 3: Взлет.

Визуальные эффекты: Широкоугольный панорамный кадр.

Действие: Мгновенное ускорение с места. Автомобиль поднимается вертикально и петляет между небоскребами, оставляя за собой красный след.

Финальный кадр: Автомобиль летит к гигантской полной луне, в центре кадра появляется серебристый металлический 3D-логотип @Image1.

3.3. Сценарий с видео-референсом.

Перенос движения, стиля или камеры из любого видео на ваш контент:

• загрузите изображение — ему будет присвоен порядковый номер 1;
• загрузите видео — у него тоже будет цифра 1, так как изображения и видеофайлы имеют отдельные поля для ввода;
• напишите запрос, в котором сошлитесь на @Image1 и @Video1;
• выберите формат и длительность, нажмите Generate.

Пример: 

Персонажи с @Image1 танцуют танец с @Video1.

4. Редактирование видео

Если у вас уже есть видео, но вы хотите внести изменения в определенный фрагмент, Seedance 2.0 предоставляет такие возможности:

• менять персонажей;
• заменять прически или любые другие элементы;
• добавлять новые детали;
• полностью изменять сюжетную линию, сохраняя все остальное.

Пример: 

Замени символ биткоина на @Image1.

Пре-релиз Seedance 2.0 спровоцировал крупный юридический кризис в индустрии развлечений. 

Высокая способность модели к воспроизведению деталей обернулась против нее самой: алгоритм продемонстрировал пугающую легкость, с которой пользователи по короткому текстовому запросу могут воссоздавать защищенных авторским правом персонажей, объекты интеллектуальной собственности и лица реальных актеров в кинематографическом качестве.

Реакция правообладателей последовала незамедлительно. По данным американского новостного издания Axios, американская ассоциация кинокомпаний (Motion Picture Association) направила руководству ByteDance официальное требование о прекращении противоправных действий.

Вслед за этим такие же письма компании направили Disney, Warner Bros. Discovery, Paramount Skydance, Netflix и Sony Pictures с обвинениями в нарушении авторских прав.

Оказавшись под угрозой судебных исков и блокировки на ключевых западных рынках, руководство ByteDance было вынуждено пойти на попятную. Представитель компании публично заявил, что она «уважает права интеллектуальной собственности и услышала озабоченность общественности».

Корпорация оперативно инициировала развертывание обновленных фильтров безопасности и ограничений для предотвращения несанкционированного использования чужой интеллектуальной собственности и копирования внешности реальных людей.

Данный прецедент наглядно демонстрирует, что технологическое совершенство ИИ-модели вторично по отношению к правовому полю, в котором она оперирует, и формирование жестких рамок цифрового лицензирования биометрических и креативных данных становится неизбежной реальностью для всей индустрии.