会员登录 - 用户注册 - 设为首页 - 加入收藏 - 网站地图 全球首个!英伟达发布了一把用于“声音的瑞士军刀”!

全球首个!英伟达发布了一把用于“声音的瑞士军刀”

时间:2024-12-26 06:17:31 来源:深不可测网 作者:知识 阅读:130次

11月26日讯,全球英伟达近日展示了其最新研发的首个声音士军人工智能模型——Fugatto。

Fugatto是英伟用于一款基于生成式Transformer架构的人工智能模型,其完整版配备了25亿个参数,达发的瑞刀并在由32个NVIDIA H100 Tensor Core GPU组成的布把NVIDIA DGX系统上进行了训练。

全球首个!英伟达发布了一把用于“声音的瑞士军刀”

这款模型的全球主要功能在于能够修改和生成声音效果,专为音乐、首个声音士军电影和视频游戏制作人设计,英伟用于英伟达将其形象地称为“声音的达发的瑞刀瑞士军刀”。

据NVIDIA应用音频研究经理Rafael Valle透露,布把Fugatto的全球研发初衷是创建一个能够像人类一样理解和生成声音的模型。

它支持多种音频生成和转换任务,首个声音士军是英伟用于首个展示紧急属性的基础生成式AI模型,这得益于其各种训练能力的达发的瑞刀交互以及组合自由格式指令的能力。

Fugatto的布把功能十分强大,能够根据文本描述生成音效和音乐,例如将钢琴演奏转换成人声歌唱,或改变录音的口音和情绪。

对于音乐制作人而言,Fugatto可以帮助他们快速制作原型或编辑歌曲创意,尝试不同的风格、声音和乐器,同时添加效果并提高现有轨道的整体音频质量。

广告代理商则可以利用Fugatto快速定位多个地区或情况的现有广告活动,将不同的口音和情感应用于画外音。

视频游戏开发人员则可以使用该模型修改游戏中预先录制的素材,或根据文本说明和可选的音频输入动态创建新素材。

另外,Fugatto 的新颖性主要体现在以下方面:

首先,在推理过程中,该模型采用了称为ComposableART的技术,能够组合在训练期间只能单独看到的指令。

例如,通过组合提示,可以要求模型以法国口音说出带有悲伤情绪的文本。

此外,该模型在指令之间进行插值的能力使用户能够对文本指令进行精细控制如重音的沉重程度或悲伤的程度。

其次,Fugatto还能够生成随时间变化的声音,NVIDIA将这一功能称为时间插值。

例如,它可以模拟暴雨穿过区域的声音,雷声逐渐增强,然后慢慢消失在远处。这一功能使用户能够精细地控制音景的演变方式。

最后,与大多数只能重现所接触的训练数据的模型不同,Fugatto允许用户创建以前从未见过的音景。

例如,它可以模拟雷雨随着鸟儿的歌声缓和为黎明的场景。

总而言之,Fugatto凭借其功能多样性和创新性,在音频领域具有广阔的发展空间。

(责任编辑:娱乐)

相关内容
  • 年轻有为!莫布里生涯总篮板数突破2000大关
  • 火箭VS雷霆:防守型比赛
  • 前途光明!尼科帕斯对热那亚创造8次机会,本赛季意甲单场最多
  • 带队出征青少年三大球运动会,徐根宝:充满信心争取勇夺冠
  • [流言板]施耐德谈亨特:他已经全身心投入到我们正在做的事情中
  • 《宝可梦 TCG Pocket》官方发布更新计划 2025年1月推出交换卡牌功能
  • 《真女神转生5:复仇》免费体验版上线Steam和PS5 存档可继承
  • 国产全AI游戏来了 一段文字、一张图 就能生成模拟开放世界游戏视频
推荐内容
  • [流言板]全靠你!杰伦
  • NBA常规赛扣篮次数排行榜
  • 《龙腾世纪4》发型令人印象深刻 每个角色有50000根发丝
  • 以梦为马,不负韶华,蓉城小将未来可期!
  • 奎因:始终相信自己属于这个赛场 机会来临时我充满信心
  • 《真女神转生5:复仇》免费体验版上线Steam和PS5 存档可继承