«Adobe Firefly теперь генерирует звуковые эффекты по аудиоподсказкам пользователей»

Adobe Firefly теперь может генерировать звуковые эффекты по вашим аудиоподсказкам

С момента перезапуска своего приложения Firefly в апреле, Adobe неустанно выпускает крупные обновления для этого хаба генеративного ИИ практически каждый месяц. Сегодня компания представляет несколько новых функций, которые помогут пользователям, работающим с видео в Firefly.

Во-первых, Adobe упрощает добавление звуковых эффектов к видеоклипам, созданным с помощью ИИ. В настоящее время большинство видеомоделей генерируют кадры без сопровождающего аудио. Adobe решает эту проблему с помощью новой функции, которая позволяет пользователям сначала описать желаемый звуковой эффект, а затем записать его своим голосом. Это необходимо не для того, чтобы модель имитировала звук, а для того, чтобы система лучше поняла интенсивность и временные характеристики эффекта.

В демонстрации, показанной Adobe, сотрудник компании использовал эту функцию для добавления звука расстегиваемой молнии. Он произнес «zzzztttt», что модель Adobe точно воспроизвела с нужной громкостью. Результат был менее убедительным при добавлении звука шагов по бетону, но для идеи, как задумано Adobe, это может не иметь значения. При добавлении звуковых эффектов в интерфейсе есть редактор временной шкалы, который облегчает синхронизацию аудио.

С обновлением Firefly в июне пользователи могут загружать изображения или видео для направления генерации видео.
Adobe

Другие новые функции, которые Adobe добавляет сегодня, включают Composition Reference, Keyframe Cropping и Video Presets. Первая из них позволяет загружать видео или изображение, снятое пользователем, для направления процесса генерации. В сочетании с Video Presets можно определить стиль итогового видео. Некоторые из вариантов, предлагаемые Adobe при запуске, позволяют создавать клипы в стиле аниме, черно-белого видео или векторной графики. Наконец, с помощью Keyframe Cropping можно загрузить первый и последний кадры видео и выбрать соотношение сторон. Firefly затем сгенерирует видео, соответствующее выбранному формату.

В июне Adobe добавила поддержку дополнительных сторонних моделей, и в этом месяце компания продолжает эту тенденцию. Наиболее примечательным является включение Veo 3, представленного Google на конференции I/O 2025 в мае. В настоящее время Veo 3 — одна из немногих моделей ИИ, способных генерировать видео со звуком. Как и в случае с другими партнерскими моделями, предлагаемыми в Firefly, Google согласилась не использовать данные пользователей Adobe для обучения будущих моделей. Каждое изображение и видео, созданное через Firefly, цифрово подписано моделью, использованной для его создания. Это одна из мер предосторожности, которые включает Adobe, чтобы клиенты Firefly не использовали случайно активы, нарушающие авторские права.

Согласно заявлению Зека Коха, вице-президента по управлению продуктами Adobe Firefly, пользователи могут ожидать продолжения такого быстрого темпа обновлений. «Мы неустанно выпускаем новые функции почти так же быстро, как можем», — сказал он. Кох добавляет, что Adobe будет продолжать интегрировать больше сторонних моделей, если их поставщики согласятся с условиями конфиденциальности данных компании.


Подпишитесь на новости в телеграм: https://t.me/itnewsros

Добавить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *