AIHub 8月3日最新消息,Meta發布了一款開源人工智能工具AudioCraft,幫助用戶根據文本提示創作音樂和音頻。

AudioCraft是什么?
AudioCraft 是 Meta 最新推出的一款 AI 工具,可讓您輕松地從文本生成高質量的、逼真的音頻和音樂。
這款工具包括三個模型:MusicGen、AudioGen 和 EnCodec。
其中,MusicGen 使用 Meta 擁有且專門授權的音樂進行訓練,根據基于文本輸入生成音樂,而 AudioGen 使用公共音效進行訓練,根據基于文本輸入生成音頻。EnCodec 解碼器,它可以用更少的音損生成更高質量的音樂。

試聽一段AudioCraft生成的音樂?:
當然,你也可以在線體驗:https://huggingface.co/spaces/facebook/MusicGen
AudioCraft可以做什么?
- 音樂生成:MusicGen 可以從文本提示中生成音樂。
- 音效生成:AudioGen 可以從文本提示中生成各種環境音和音效,例如狗吠、汽車鳴笛或木地板上的腳步聲。
- 高質量音頻生成:AudioCraft 的模型能夠生成長期一致性的高質量音頻,并且使用起來非常簡單。
- 開源模型:Meta 已經開源了這些模型,允許研究者和實踐者首次使用自己的數據集訓練自己的模型,從而推動 AI 生成音頻和音樂領域的發展。
適用場景
- 專業音樂家探索新作品:而無需在樂器上演奏單個音符。
- 小企業主為其在 Instagram 上的最新視頻廣告添加配樂。
- 音樂和聲音設計師尋找靈感:幫助人們以新的方式快速構思并迭代他們的作品。
- 開發者和研究者:可以使用開源的 AudioCraft 模型進行進一步的研究和開發。
使用步驟
- 選擇模型:根據需要選擇 MusicGen、AudioGen 或 EnCodec。
- 輸入文本提示:例如,如果你想生成一首關于雨的音樂,你可以輸入“雨”作為提示。
- 生成音頻:工具會根據你的提示生成音頻或音樂。
- 進一步定制:你可以根據需要進一步定制生成的音頻,例如調整音量、音調等。
總之,AudioCraft是一種非常有趣和強大的人工智能工具,可以幫助用戶創作出高質量的音樂和音頻。通過簡單的文本提示,用戶可以快速生成自己想要的音頻內容,這對于音樂制作、游戲開發、影視制作等領域有很大的吸引力。同時,AudioCraft的開源性質也有利于促進人工智能技術的發展和普及。
希望這些信息能幫助你更好地了解 AudioCraft!如果你想了解更多,可以訪問他們的 AI 博客。
GitHub地址:https://github.com/facebookresearch/audiocraft
MusicGen體驗地址:https://huggingface.co/spaces/facebook/MusicGen
