Reallusion сочетает 3D-контроль с Seedance 2.0 от ByteDance

      TL;DRReallusion запустила AI Studio, платформу для производства, которая сочетает инструменты 3D-анимации iClone с Seedance 2.0 от ByteDance, чтобы предоставить кинематографистам пространственную точность, которую не могут обеспечить только текстовые AI-видеогенераторы. Мульти-модельная платформа также поддерживает Veo 3, Kling AI и другие.

      Reallusion, компания по разработке программного обеспечения для 3D-анимации, стоящая за iClone и Character Creator, запустила AI Studio, платформу для производства, которая сочетает традиционное создание 3D-сцен с генеративными AI-видеомоделями. Центральным элементом является прямая интеграция с Seedance 2.0 от ByteDance, в настоящее время занимающей первое место в рейтинге AI-видеомоделей на Artificial Analysis.

      Предложение простое. AI-видеогенераторы, такие как Seedance, Veo 3 от Google и Gen-4 от Runway, могут создавать впечатляющие кадры из текстовых подсказок, но им не хватает точности. Сложные движения персонажей, хореография камеры и пространственная непрерывность нарушаются, когда AI работает только с языком. Объекты искажаются, перспективы смещаются, и режиссеры имеют ограниченный контроль над тем, что фактически появляется на экране.

      Ответ Reallusion — это гибкий рабочий процесс. Художники создают свою сцену в iClone, инструменте 3D-анимации в реальном времени, устанавливая пути камеры, позиции персонажей, скелетные движения и освещение. Эти 3D-данные затем служат тем, что компания называет «слоем контроля точности» для AI-модели. Seedance 2.0 обрабатывает визуальную отрисовку, текстуры и кинематографическое качество, в то время как 3D-сцена обеспечивает пространственную структуру. Художник сохраняет контроль режиссуры. AI отвечает за исполнение.

      Seedance 2.0 хорошо подходит для этого подхода. ByteDance разработала его с сильным пространственным интеллектом, что означает, что он может интерпретировать точные макеты сцен, пути камеры и скелетные данные без догадок, которые беспокоят другие модели. Он генерирует клипы длиной до 15 секунд с хореографией камеры и динамикой движения, которые кажутся намеренными, а не случайными. Индустрия AI-видео в Китае развивалась быстрее, чем любой другой рынок в области производственных инструментов, и Seedance отражает этот импульс.

      AI Studio не ограничивается одним движком. Reallusion разработала его как мульти-модельную платформу, объединяя Flux и Nano Banana для генерации изображений наряду с Kling AI, Veo 3, Wan, LTX и Scail для видео. Пользователи могут переключаться между моделями в зависимости от кадра, выбирая одну для фотореализма и другую для стилизованной анимации. Идея заключается в том, чтобы предоставить студиям гибкость использовать ту модель, которая лучше всего подходит для каждой сцены, а не привязываться к одному поставщику.

      Время имеет значение. OpenAI закрыла Sora в апреле после того, как видеоинструмент достиг пика в один миллион пользователей и, как сообщается, стоил 1 миллион долларов в день на эксплуатацию. Закрытие потрясло создателей, которые построили рабочие процессы вокруг него, и подчеркнуло риск зависимости от одной AI-платформы. AI-анимированный фильм Critterz пропустил свой дебют на рынке Канн как прямое следствие.

      Reallusion позиционирует AI Studio как более стабильную альтернативу. Поскольку данные 3D-сцены хранятся локально в iClone, творческая работа не теряется, если конкретная AI-модель прекращает существование или меняет цену. 3D-активы, данные о движении и настройки камеры остаются пригодными для использования. Меняется только слой рендеринга. Это значительное отличие для студий, инвестирующих в долгосрочные производственные процессы.

      Компания, основанная в 1993 году с центрами НИОКР на Тайване и офисами в Силиконовой долине, Канаде, Германии и Японии, потратила десятилетия на создание инструментов для 3D-анимации персонажей в реальном времени. iClone и Character Creator используются в разработке игр, предварительной визуализации фильмов и виртуальном производстве. AI Studio расширяет эту экосистему в генеративное видео, не отказываясь от 3D-навыков, в развитие которых существующие пользователи вложили годы.

      Adobe приняла аналогичный подход с помощью своего AI-ассистента Firefly и проекта Graph, интегрируя генеративные модели в существующее творческое программное обеспечение, а не заменяя его. Модель по всей индустрии сходит на нет: самые полезные AI-творческие инструменты не являются отдельными генераторами, а гибридными системами, которые дополняют профессиональные рабочие процессы.

      Будет ли AI Studio набирать популярность, зависит от того, выполнит ли гибридная модель свои обещания. Чистая генерация AI-видео быстро улучшается, и каждая новая модель сокращает разрыв между тем, что может произвести текстовая подсказка, и тем, что предоставляет 3D-контролируемый процесс. Reallusion ставит на то, что этот разрыв никогда полностью не закроется, что профессиональные кинематографисты всегда будут нуждаться в пространственной точности, повторяемых настройках камеры и контроле на уровне кадров, который генерация на основе языка не может гарантировать.

      Для AI-видеорынка в состоянии изменения, где ведущая модель меняется каждые несколько месяцев, а платформы могут исчезнуть за ночь, инструмент, который сохраняет творческие решения в руках художника, а не в весах модели, является ставкой на стабильность, а не на зрелище. Будет ли эта ставка успешной, зависит от того, сколько кинематографистов предпочтет контроль удобству.