英伟达:Fugatto可以创造出前所未有的声音

Yu |  2024-11-26

  11月26日消息,英伟达表示,其新的AI音乐编辑器能够创造“前所未有的声音”,比如会发出喵喵声的小号。这个工具名为Fugatto,它能够使用从未接受过训练的文本和音频输入来生成音乐、声音和语音。

  正如下面嵌入的视频所示,这让Fugatto能够根据奇特的提示组合歌曲,比如“创建一个发出嚎叫、吠叫然后是带有狗叫声的电子音乐。”

  公司分享的其他一些例子包括根据描述产生独特的音效,如“深沉、隆隆作响的低音脉冲与间歇性的高调数字鸣叫相结合,就像一个巨大的有感知的机器醒来的声音。”

  它甚至可以改变某人的声音,改变他们的口音或给他们不同的语调,如愤怒或平静。还有编辑音乐的方法,因为Fugatto可以隔离歌曲中的人声,添加乐器,甚至通过用歌剧歌手替换钢琴来改变旋律。

  与公告一同发布的一篇论文展示了英伟达称Fugatto受过训练的所有数据集的长列表,其中一个包括来自BBC的声音效果库。

  市场上已经有其他几个AI音频工具,包括Stability AI、OpenAI、Google DeepMind、ElevenLabs和Adobe的产品,但没有声称能创造全新且未曾听闻的声音的工具。一些AI初创公司甚至因为他们的音乐创作工具面临版权诉讼,而最近的一份报告发现,英伟达和其他公司利用数千个YouTube视频的字幕训练AI模型。

  为了构建Fugatto,英伟达表示研究人员必须汇集一个包含数百万音频样本的数据集。然后他们创建了指令,这大大扩展了模型可以执行的任务范围,同时实现更准确的性能并启用新任务,无需额外的数据。英伟达没有说这个工具何时或者是否将广泛可用。

查看更多内容
正在加载
第三方账号登录
X
发布