Adobe Firefly теперь может генерировать музыку, речь и звуковые эффекты

      Инструменты аудио Adobe Firefly стали общедоступными в четверг. Генерация музыки, генерация речи и генерация звуковых эффектов теперь находятся рядом с инструментами для работы с изображениями, видео и дизайном в его креативной AI-студии.

      Каждый из них работает на своей модели. Генерация музыки использует модель Firefly Music и создает оригинальные треки, настроенные на длину и настроение видео. Генерация речи работает на модели Firefly Speech, с ElevenLabs в качестве опции. Она предоставляет контроль над голосом, темпом и эмоциями. Генерация звуковых эффектов использует модель Firefly Audio, чтобы сопоставить звуки с ритмом клипа.

      Adobe называет очевидные применения: социальный контент, прямые блоги, короткометражные фильмы, учебные пособия по продуктам и клипы подкастов. Для этого нет отдельной подписки.

      Проблема, которую, по словам Adobe, она решает, заключается в переключении между вкладками. Создатели прыгают между рабочими пространствами, приложениями и отдельными сервисами, и поток прерывается каждый раз. Звук — это то, где это происходит чаще всего, утверждает компания, потому что он обычно является последним элементом, добавленным в проект, и первым, что замечает аудитория.

      Список функций невыдающийся. Множество инструментов генерируют музыку по запросу. То, что на самом деле продает Adobe, заключается в фразе, которую она повторяет на протяжении всего объявления.

      Продукт — это лицензия

      «Коммерчески безопасный» появляется снова и снова. Генерация музыки создает «оригинальные треки с универсальной лицензией», говорит Adobe. Музыка может «идти туда, куда идет ваш контент, не беспокоясь о блокировках». Аудио «создано для реального производства».

      Ничто из этого не описывает качество звука. Это описывает юридическую подверженность, и это и есть предложение.

      Adobe обучает модели Firefly на лицензированном и общественном материале. Именно поэтому она может делать такие обещания. Компания построила свою генеративную стратегию вокруг этого различия с момента запуска Firefly, и аудио — последний крупный формат, который появился под его эгидой.

      Почему это происходит сейчас

      Синхронизация времени играет важную роль. Немецкий суд в июле постановил, что Suno нарушил авторские права, это первое такое решение в Европе. Дело подала collecting society GEMA.

      С тех пор Suno отступает под юридическим давлением. Столкнувшись с судебными исками, компания решила добавить водяные знаки и отпечатки к своему контенту в этом месяце и ограничить загрузки.

      Тем не менее, контент продолжает поступать. AI-музыка попала в чарты в этом году, и артисты, использующие ее, перестали это скрывать. Adobe выходит на рынок, где технология работает, а спрос доказан. Открытым остается вопрос, выживет ли трек после контакта с правообладателем.

      Два создателя, упомянутых в объявлении, подчеркивают эту точку зрения в коммерческих терминах. Один описал лицензирование фоновой музыки как повторяющуюся проблему при работе с брендами. Adobe предоставила оба отзыва.

      Adobe перепродает своих конкурентов

      Firefly не работает только на моделях Adobe. Студия использует системы от Google, ElevenLabs, Kling AI, Luma AI, OpenAI и Runway. В четверг Adobe добавила Gemini Omni Flash от Google.

      Эта модель принимает видео, аудио и изображения наряду с текстом. Грубая идея может стать раскадровкой в том же окне.

      Опция ElevenLabs — самая интересная. Adobe создала свою собственную модель речи, а затем предложила модель конкурента рядом с ней. ElevenLabs вела переговоры о тендерном предложении с оценкой в 22 миллиарда долларов в июле, так что это не мелкий поставщик, который тихо поглощается.

      Adobe, похоже, довольна тем, что является рабочим пространством, а не моделью, при условии, что работа происходит в ее окне. Это другая ставка, чем та, которую делают большинство AI-компаний, и она окупается только если Firefly является местом, где начинается проект.

      Это также создает странное разделение в предложении лицензирования. Adobe может поручиться за треки из своей собственной музыкальной модели. Гарантия сложнее распространить на студию, которая также использует системы шести других компаний, и язык коммерческой безопасности Adobe привязан к моделям Firefly конкретно.

      Ассистент теперь бесплатен

      Adobe также открыла AI-ассистента Adobe Firefly для всех, с бесплатным уровнем и ежедневными генерациями. Ассистент был запущен в бета-версии ранее в этом году. В июне он получил набор креативных навыков, когда компания объявила о своем крупнейшем AI-усилие на сегодняшний день.

      Создание раскадровки и создание брендового набора входят в число самых используемых из этих навыков, согласно Adobe. Ассистент также обрабатывает пакетные редактирования и брендированные макеты. Сопутствующая функция под названием Elements хранит персонажей, локации и объекты в проекте, чтобы они могли переноситься между ними.

      Бесплатный ассистент и отсутствие аудиоподписки указывают в одном направлении. Adobe покупает привычку. Она ставит на то, что создатели, которые собирают проект внутри Firefly, заплатят за части, которые его завершат.

      Статистика рынка сопровождается сноской

      Adobe поддерживает свой случай исследованиями из Беркли колледжа музыки. Почти четыре из пяти опрошенных создателей видео, музыкантов и маркетологов публикуют видео-контент ежедневно или несколько раз в неделю. Каждый респондент сказал, что использует музыку в своих видео.

      Adobe профинансировала исследование. В ее собственной сноске это указано. Сноска добавляет, что компания «не контролировала набор респондентов, ответы на опрос, анализ или выводы», и что Лаборатория новых художественных технологий Беркли несла редакционную ответственность за отчет.

      Это раскрытие более полное, чем многие статистические данные, цитируемые поставщиками. Это остается числом, за которое компания заплатила, использовав его, чтобы утверждать, что ее новый продукт отвечает широко распространенной потребности.

      Что на самом деле тестируется

      Значение имеет требование о компенсации, а не аудио. Adobe говорит, что ее музыка имеет универсальную лицензию и защищена от блокировок. Создатели, передающие работу клиентам, должны доверять этому.

      Музыкальная индустрия потратила два года на споры о том, какие данные для обучения делают сгенерированный трек законным. Судебные инстанции в Европе только начали отвечать. Adobe поставила себя на сторону этого спора, который она ожидает выиграть, используя материал, который, по ее словам, она лицензировала.

      Если позиция удержится, предложение будет непревзойденным для любого, кто выставляет счет клиенту. Если суд решит, что лицензированные данные для обучения все еще могут производить производный контент, обещание будет стоить столько же, сколько и любое другое обещание на этом рынке. На данный момент Adobe продает единственное, что ее конкуренты не могут рекламировать.