Компания Adobe выпустила крупное обновление платформы генеративных ИИ-сервисов Firefly, в частности – добавила функцию добавления аудио к клипам с помощью генеративного ИИ. Это обновление будет крайне полезно тем, кто использует Firefly для создания контента.
Если раньше при генерации видео в нем отсутствовал звук, то сейчас можно описать желаемый звуковой эффект, имитировать его голосом, на основе чего он будет сгенерирован. Отмечается, что имитация голосом нужна по большей части для того, чтобы ИИ понял, какой интенсивности и продолжительности звук вам нужен.
Во время демонстрации работы этих функций сотрудник Adobe сгенерировал звук расстегивающейся молнии, произнеся «зззттт». Алгоритм точно воспроизвел нужный эффект, и хотя компания признает, что пока инструмент работает не идеально, он отлично подходит, например, для создания черновых версий.
Больше статей и видео в нашем Дзен-канале
Следующее нововведение – функция, которая позволяет менять генерацию на основе предоставленного изображения. Она называется Composition Reference, и в ней есть несколько встроенных пресетов: можно создавать аниме, черно-белое видео и видео с использованием векторной графики.
Также добавили Keyframe Cropping – она позволяет загружать первый и последний кадры видео и выбирать соотношение сторон, после чего Firefly сгенерирует видео, которое соответствует данному формату.
Отметим, что в прошлом месяце на платформе появилась поддержка сторонних ИИ-алгоритмов, и одним из самых значимых событий стало появление Google Veo 3 – одного из немногих ИИ, который может генерировать видео со звуком.
При этом все созданные таким образом видео получают цифровую подпись, которая указывает, что видео было сгенерировано. На случай, если потребуется отличить ИИ-контент от реальных видеозаписей.
