英伟达:Fugatto可以创造出前所未有的声音
11月26日消息,英伟达表示,其新的AI音乐编辑器能够创造“前所未有的声音”,比如会发出喵喵声的小号。这个工具名为Fugatto,它能够使用从未接受过训练的文本和音频输入来生成音乐、声音和语音。
正如下面嵌入的视频所示,这让Fugatto能够根据奇特的提示组合歌曲,比如“创建一个发出嚎叫、吠叫然后是带有狗叫声的电子音乐。”
公司分享的其他一些例子包括根据描述产生独特的音效,如“深沉、隆隆作响的低音脉冲与间歇性的高调数字鸣叫相结合,就像一个巨大的有感知的机器醒来的声音。”
它甚至可以改变某人的声音,改变他们的口音或给他们不同的语调,如愤怒或平静。还有编辑音乐的方法,因为Fugatto可以隔离歌曲中的人声,添加乐器,甚至通过用歌剧歌手替换钢琴来改变旋律。
与公告一同发布的一篇论文展示了英伟达称Fugatto受过训练的所有数据集的长列表,其中一个包括来自BBC的声音效果库。
市场上已经有其他几个AI音频工具,包括Stability AI、OpenAI、Google DeepMind、ElevenLabs和Adobe的产品,但没有声称能创造全新且未曾听闻的声音的工具。一些AI初创公司甚至因为他们的音乐创作工具面临版权诉讼,而最近的一份报告发现,英伟达和其他公司利用数千个YouTube视频的字幕训练AI模型。
为了构建Fugatto,英伟达表示研究人员必须汇集一个包含数百万音频样本的数据集。然后他们创建了指令,这大大扩展了模型可以执行的任务范围,同时实现更准确的性能并启用新任务,无需额外的数据。英伟达没有说这个工具何时或者是否将广泛可用。
相关阅读
- 浪潮信息发布“源2.0-M32”开源大模型,大幅提升模算效率
- 比特网早报:金山办公升级金山办公政务大模型,OpenAI新推理模型被曝产生更多幻觉
- TITAN Core触觉DIY大赛:激发中国触觉技术的创新潜力
- Qorvo 推出具有卓越能效的新一代 Matter 解决方案
- E3650工具链生态再增强,IAR全面支持芯驰科技新一代旗舰智控MCU
- 研华发布高性能工业边缘 AI 算力方案 携手N腾引领边缘 AI 革新
- 比特早报:三季度中国中小企业发展指数回升,谷歌云发布新AI搜索功能
- 台积电宣布2年内退出6英寸晶圆制造
- 全球唯三 宁德时代点亮第3座“灯塔工厂”
- 比特网早报:腾讯2024年营收6602.57亿元,豆包宣布AI编程功能再升级