ElevenLabs 推出 Instant Soundtracks 视频配乐功能
该功能可分析视频内容与情绪,自动生成原创音乐与音效,并已通过 ElevenCreative、ElevenMusic 及 API 开放。
据 datanet.co.kr 报道,AI 音频公司 ElevenLabs 推出了名为 Instant Soundtracks 的新功能,可分析上传视频的内容与情绪,自动生成原创音乐与音效。
该功能会识别画面场景,并在对应的时间点放置音效,将背景音乐创作与音效安置合并为一次生成过程。音乐的节奏针对短视频的快节奏剪辑进行调校,风格可随场景情绪切换,例如快节奏场景使用 EDM 或 R&B,平静场景则使用以原声吉他为主的音乐。
若视频本身已含音频,该功能可参考原有音频的曲风、BPM 与配器,生成相匹配的新音乐。生成的音乐与音效可在 ElevenCreative 的 Music Video Editor 中编辑,音效位于独立轨道,可单独调整、添加与调整时序。
该功能自 15 日起已通过 ElevenCreative、ElevenMusic 及 API 提供。ElevenCreative Studio API 的 Video to Music 功能新增 add_sfx、separate_tracks 与 use_audio_as_reference 三个参数;将 separate_tracks 设为 true 时,音乐与音效会以独立文件打包为 ZIP 返回,便于在外部剪辑工具中混音。该 API 单次请求最多可处理 10 段视频。
快速问答
Instant Soundtracks 可以通过哪些渠道使用?
该功能自 15 日起已通过 ElevenCreative、ElevenMusic 以及 API 提供。
生成的音乐和音效可以分开导出吗?
可以。在 ElevenCreative Studio API 中将 separate_tracks 设为 true,音乐与音效会以独立文件打包为 ZIP 返回。
API 一次能处理多少段视频?
该 API 单次请求最多可处理 10 段视频。