Adobe представила обновления для Firefly: новые звуковые эффекты и интеграция моделей ИИ

Компания Adobe 17 июля выпустила несколько серьёзных обновлений для Firefly, которые, возможно, изменят подход к созданию видео. Самая важная новость — теперь можно создавать собственные звуковые эффекты, просто говоря в микрофон. 

Скажите «раскаты грома» или «звон бьющегося стекла», и Firefly сгенерирует звуковой эффект с нужным таймингом и интенсивностью. Кроме того, Adobe добавляет модели искусственного интеллекта ^[1] от своих конкурентов, в том числе Gen-4 от Runway и Veo3 от Google, прямо в приложение Firefly.

Функция звуковых эффектов действительно инновационна. Вы можете записать, как вы воспроизводите звуковой эффект, а Firefly будет использовать ваш голос для определения времени, громкости и интенсивности генерируемого звука. Это даёт авторам гораздо больше возможностей, чем просто ввести «звук взрыва» и надеяться на лучшее.

Стратегия Adobe продумана: вместо того чтобы пытаться превзойти каждого конкурента, они объединяют лучшие инструменты на одной платформе. Недавно компания добавила в Firefly Boards видеогенератор Runway Gen-4 и Google Veo3 с аудио, а также Veo3 с аудио в Generate Video. Они также отметили, что в Firefly Boards скоро появятся средства повышения качества изображений и видео от Topaz и Marey от Moonvalley. Это значит, что можно будет экспериментировать с различными моделями ИИ и инструментами, не переключаясь между разными приложениями и рабочими процессами.

Они также добавили новые элементы управления видео, предназначенные для профессиональных авторов. Функция Composition Reference позволяет загрузить эталонное видео и создать новый контент, соответствующий структуре оригинала. С помощью предустановленных стилей можно одним щелчком мыши придать видео вид пластилиновой анимации или аниме. Функция Keyframe Cropping позволяет загрузить первый и последний кадры и создать видео, точно соответствующее вашему формату.

Самым большим преимуществом Adobe остаётся акцент на коммерческой безопасности. В то время как у конкурентов, таких как Sora от OpenAI, возникают вопросы по поводу обучающих данных, модели Firefly от Adobe обучаются только на том контенте, на использование которого у Adobe есть разрешение. Для компаний, обеспокоенных вопросами авторского права, это очень важно.

Компания также запускает функцию Text to Avatar, которая превращает сценарии в видеоролики с аватарами. Выбирайте из множества аватаров, настраивайте фон и выбирайте акценты — это пригодится для обучающих видео, контента для соцсетей или презентаций идей.

Для создателей видео это обновление делает Firefly универсальным инструментом для работы с видео на основе искусственного интеллекта. Вы получаете коммерчески безопасные модели от Adobe, а также доступ к передовым решениям конкурентов с профессиональным управлением. 

Сфера видео с использованием искусственного интеллекта стремительно развивается, и Adobe старается не отставать, внедряя как собственные технологии, так и лучшие разработки конкурентов.

Делегируйте часть рутинных задач вместе с BotHub ^[2]! Для доступа к сервису не требуется VPN и можно использовать российскую карту. По ссылке ^[3] вы можете получить 100 000 бесплатных токенов для первых задач и приступить к работе с нейросетями прямо сейчас!

Перевод, источник новости здесь ^[4].