Представляем Instant Soundtracks

Источник: ElevenLabs•

Представляем Instant Soundtracks

Представляем Instant Soundtracks: автоматическое преобразование видео в музыку и звуковые эффекты.

Создавайте саундтрек и синхронизированные звуковые эффекты для любого видео, загруженного в ElevenCreative.

Добавляйте музыку и звуковые эффекты к любому видео в ElevenCreative

Улучшайте любое видео, загруженное в ElevenCreative, создавая звуковые эффекты вместе с саундтреком с помощью Instant Soundtracks. Новое обновление ElevenCreative, выпущенное сегодня, позволяет загрузить видео, после чего модель накладывает на него оригинальную музыку, анализирует видеоряд на предмет звуковых эффектов и генерирует их, синхронизируя с нужными моментами.

Эти сгенерированные эффекты автоматически размещаются на временной шкале в соответствии с видео. Модель отслеживает моменты, требующие звукового сопровождения, и размещает каждый эффект в нужный момент времени — например, звук «вуш» точно в момент появления логотипа в конце рекламного ролика.

Сегодняшнее обновление также улучшает синхронизацию для коротких видео и обеспечивает более точную смену настроения между сценами. Теперь вы также можете использовать существующий звук вашего видео в качестве ориентира для новой партитуры. Модель может проанализировать аудио — например, его жанр, крещендо, темп или инструменты — и использовать эти данные для формирования новой музыки. В результате получается композиция, соответствующая характеру оригинала, а не созданная с нуля.

Продолжайте доработку в редакторе

В видеоредакторе ElevenCreative Music Video Editor звуковые эффекты отображаются как отдельные слои, поэтому вы можете просматривать и настраивать их независимо от саундтрека. Вы также можете добавлять дополнительные эффекты, корректировать тайминг, менять музыку или дорабатывать отдельные моменты, не начиная все сначала. Когда вы будете довольны результатом, вы сможете экспортировать его прямо из ElevenCreative.

Улучшенный тайминг для коротких форматов, больше контроля

Instant Soundtracks разработана с учетом темпа коротких видео, обеспечивая более точную синхронизацию с монтажными склейками, переходами и действиями на экране. Она также может менять настроение музыки при смене сцен. Например, если динамичная сцена сменяется более спокойной, фоновая музыка может переключиться с EDM или R&B на акустическую гитару для создания более интимной атмосферы.

Доступно уже сегодня в ElevenCreative, ElevenMusic и API

Функция Instant Soundtracks доступна уже сегодня. Вот как получить к ней доступ:

  • Видеоредактор в музыкальной вкладке ElevenCreative со звуковыми эффектами в виде отдельного слоя и элементами управления для использования аудио в качестве ориентира.
  • Creative Engine для добавления музыки и звуковых эффектов в рекламные ролики.
  • ElevenMusic platform
  • ElevenCreative Studio API с использованием новых параметров: add_sfx, separate_tracks и use_audio_as_reference.

При использовании параметра separate_tracks=true API возвращает ZIP-файл с музыкой и звуковыми эффектами в виде отдельных файлов, что позволяет сводить их в вашем собственном рабочем процессе или в Studio.

Поддерживается до 10 видео на запрос, общим объемом до 200 МБ и длительностью до 10 минут.

Начните добавлять музыку и звуковые эффекты к вашим видео уже сегодня.

О чём эта статья

Ещё в разделе «AI и машинное обучение»

Все →

Ещё от ElevenLabs