英伟达:Fugatto可以创造出前所未有的声音
11月26日消息,英伟达表示,其新的AI音乐编辑器能够创造“前所未有的声音”,比如会发出喵喵声的小号。这个工具名为Fugatto,它能够使用从未接受过训练的文本和音频输入来生成音乐、声音和语音。
正如下面嵌入的视频所示,这让Fugatto能够根据奇特的提示组合歌曲,比如“创建一个发出嚎叫、吠叫然后是带有狗叫声的电子音乐。”
公司分享的其他一些例子包括根据描述产生独特的音效,如“深沉、隆隆作响的低音脉冲与间歇性的高调数字鸣叫相结合,就像一个巨大的有感知的机器醒来的声音。”
它甚至可以改变某人的声音,改变他们的口音或给他们不同的语调,如愤怒或平静。还有编辑音乐的方法,因为Fugatto可以隔离歌曲中的人声,添加乐器,甚至通过用歌剧歌手替换钢琴来改变旋律。
与公告一同发布的一篇论文展示了英伟达称Fugatto受过训练的所有数据集的长列表,其中一个包括来自BBC的声音效果库。
市场上已经有其他几个AI音频工具,包括Stability AI、OpenAI、Google DeepMind、ElevenLabs和Adobe的产品,但没有声称能创造全新且未曾听闻的声音的工具。一些AI初创公司甚至因为他们的音乐创作工具面临版权诉讼,而最近的一份报告发现,英伟达和其他公司利用数千个YouTube视频的字幕训练AI模型。
为了构建Fugatto,英伟达表示研究人员必须汇集一个包含数百万音频样本的数据集。然后他们创建了指令,这大大扩展了模型可以执行的任务范围,同时实现更准确的性能并启用新任务,无需额外的数据。英伟达没有说这个工具何时或者是否将广泛可用。
相关阅读
- X-FAB在制造工艺上的突破为电隔离解决方案增加CMOS集成选项
- 比特早报:上海发放首批完全无人载人车牌照,混元DiT推出小显存版本
- “泰”City啦!上能电气东南亚工商业
- 尼得科电力能源荣获三菱重工业(上海)颁发的“精益质量领袖奖”
- 瑞典Ionautics lonMeter:精准监测电离分数与沉积通量,助力PVD/IPVD工艺与涂层质量双重提升
- LoRa联盟 扩大在华业务布局;任命甘泉(Andy Gan)为首位区域大使
- GaN Systems 推出第四代氮化镓平台 突破能源效率瓶颈 加速应用版图拓展
- 大咖论道智能座舱与智能驾驶的技术创新与生态布局
- 安森美和理想汽车续签战略协议,共同打造下一代800V智能电动车
- 2023开源新疆界:天工开物多元合作峰会在武汉成功举办