Meta 推出 AI 音频模型 Audiobox：支持语音及文字同时输入、可生成多层次声音

图片地址：https://img.ithome.com/newsuploadfiles/2023/12/6b6e35c9-4d83-4511-9f1a-a1098b5ffcc1.png?x-bce-process=image/format,f_auto

IT之家 12 月 4 日消息，Meta 日前推出了一款 AI 声音生成模型 Audiobox，能够同时接收语音及文字输入，用户可同时使用语音及文字描述，让这款模型生成所需的音频。据悉，这款模型基于 Meta 今年 6 月推出的 Voicebox AI 模型，据称 Audiobox 能生成各种环境音、自然对话语音，并整合了音频生成和编辑能力，以便于用户自由生成自己所需的音频。Meta 介绍称，生成高品质音频需要有大量音频库及深厚的领域知识，但大众难以获得这些资源，而该公司推出这个模型旨在降低声音生成门槛，让任何人都更容易制作视频、游戏等应用场景的音效。IT之家发现，这款 Audiobox 模型基于 Voicebox 的“引导声音”机制，以便于生成目标音频，并配合“流量比对（flow-matching）”扩散模型生成方法，以实现“声音填充（audio infilling）”功能，从而生成多层次的音频。Meta 测试生成带有雷暴声的