Decart's Lucy 2.5 открывает новые живые видеоэффекты, но физический ИИ - настоящий победитель

      Стартап в области искусственного интеллекта Decart продолжает расширять границы возможного с выпуском своей последней модели живого видео, Lucy 2.5, впервые представляя возможности потоковой передачи визуальных эффектов в реальном времени.

      Стартап утверждает, что Lucy 2.5 уникальна в своей способности непрерывно генерировать AI VFX на лету и встраивать их в живые видео по мере их создания. Впервые компании по производству медиа и независимые создатели смогут генерировать реалистичные огненные шары, заставлять персонажей выдыхать дым, вспыхивать в огне или даже раздуваться и взрываться в кровавом беспорядке по щелчку команды.

      То, что она обещает, — это эффекты в стиле голливудских фильмов, ограниченные только воображением, и без необходимости в пост-продакшн обработке.

      Lucy 2.5 имеет потенциал открыть настоящий скачок в креативности, но ее полезность на этом не заканчивается. Модель, обладая мастерством в сложной физике и тонких визуальных деталях, также предоставляет более прочную основу для Decart в реализации своих более широких амбиций в области физического ИИ. Lucy 2.5 не только предлагает кинематографический стиль, но и служит двигателем двойного назначения, который может обеспечить большую точность в моделировании мира, используемом для обучения робототехники.

      Что нового в Lucy 2.5?

      Decart значительно улучшил модель Lucy с момента выпуска версии 2 всего пять месяцев назад. Самое большое изменение — это добавление реалистичных визуальных эффектов, позволяя пользователям вставлять взрывы, огонь, цунами и полностью изменять внешний вид персонажей на экране, например, придавая им вид тающего шоколадного батончика.

      Креативщики смогут вызывать спецэффекты сколько угодно, и они будут выглядеть гораздо более реалистично, чем эффекты, созданные предыдущими моделями, благодаря улучшенному физическому движку и соблюдению команд.

      Также появилась большая точность. Decart утверждает, что пользователи получают более тонкий контроль над тем, как именно генерируемые ИИ элементы размещаются и ведут себя при интеграции в живое видео. Они также смогут мгновенно стирать нежелательные объекты и персонажи, без каких-либо заметных артефактов, которые выдают факт редактирования. Эти возможности в совокупности приводят к гораздо более реалистичному конечному результату, и они уже доступны через API Decart.

      Реклама и маркетинг — очевидная цель для Decart, так как Lucy 2.5 позволяет этим пользователям создавать персонализированные версии рекламных роликов в реальном времени.

      Шопинг-опыт также должен стать намного более захватывающим. Ушли в прошлое дни, когда приходилось представлять, как вы будете выглядеть в новом пальто или откровенном платье. Просто подключите Lucy к вашей камере, затем выберите изображение продукта, который хотите увидеть, и ультрареалистичный физический движок Lucy объединит их в новое видео в высоком разрешении, показывающее, как это будет выглядеть в реальном мире.

      Последствия для иммерсивной электронной коммерции, виртуальной примерки и даже волшебных зеркал в магазинах многообещающие.

      Скачок вперед для мировых моделей

      Запуск Lucy 2.5 — это всего лишь последняя веха в стремительном восхождении Decart, который за последние два года стал одним из ведущих игроков в области генерации видео с помощью ИИ.

      За последние несколько месяцев все элементы сложились на месте, чтобы Decart утвердился как серьезный соперник таким компаниям, как Runway, Luma AI, Pika Labs и даже Google. В декабре Decart заключил сделку с Amazon Web Services, чтобы использовать их сервис Amazon Bedrock и процессоры Trainium для предложения Lucy в качестве продукта "подключи и работай". В марте Comcast и Nvidia объявили о партнерстве с Decart для создания распределенной сети ИИ на основе национальной архитектуры edge от Comcast.

      Этот инфраструктурный прирост помог проложить путь для запуска Lucy 2 ранее в этом году, за которым последовал огромный раунд финансирования в 300 миллионов долларов, закрывшийся в мае. При поддержке венчурного капитала Amazon, Nvidia, Adobe Ventures, Atreides Management, Sequoia Capital и других, Decart утвердился не только как тяжеловес в области видео с ИИ, но и как один из самых горячих новаторов в смежной области мировых моделей и вычислительной инфраструктуры для видео.

      Мировые модели тесно связаны с видео с ИИ, так как они используются для генерации окружений, которые могут имитировать физические, реальные условия, и Decart также добился значительных успехов в этой области. Благодаря своему мощному симуляционному движку Oasis 3, компания начала добиваться реальных успехов в обучении робототехники, позволяя разработчикам "физического ИИ" точно настраивать системы, которые могут безопасно управлять автономными роботами и автомобилями с автопилотом в реальном мире.

      Запуск Lucy 2.5 обещает ускорить усилия Decart в области мировых моделей так же, как он будет расширять креативное видео. Улучшенная точность и визуальные эффекты Lucy 2.5 имеют потенциал улучшить симуляции физического ИИ некоторыми умными способами. Например, разработчики могут протестировать, как автономный автомобиль ведет себя в густом тумане, когда он больше не может полагаться на свои камеры.

      В качестве альтернативы они могут создать еще более экстремальные сценарии, обучая дронов, как избегать торнадо, или роботов, как реагировать на взрыв в промышленном объекте, где они работают. Объединив возможности Lucy 2.5 с Oasis 3, Decart должен быть в состоянии генерировать гораздо более непредсказуемые, а значит, и более реалистичные тренировочные симуляции.