今天小编分享的科技经验：全球首个！英伟达发布了一把用于“声音的瑞士军刀”，欢迎阅读。
快科技 11 月 26 日讯，英伟达近日展示了其最新研发的人工智能模型—— Fugatto。
Fugatto 是一款基于生成式 Transformer 架构的人工智能模型，其完整版配备了 25 亿个参数，并在由 32 个 NVIDIA H100 Tensor Core GPU 组成的 NVIDIA DGX 系统上进行了训练。
这款模型的主要功能在于能够修改和生成声音效果，专为音乐、电影和视频游戏制作人设计，英伟达将其形象地称为 " 声音的瑞士军刀 "。
据 NVIDIA 应用音频研究经理 Rafael Valle 透露，Fugatto 的研发初衷是创建一个能够像人类一样理解和生成声音的模型。
它支持多种音频生成和转换任务，是首个展示紧急属性的基础生成式 AI 模型，这得益于其各种训练能力的互動以及组合自由格式指令的能力。
Fugatto 的功能十分强大，能够根据文本描述生成音效和音乐，例如将钢琴演奏转换成人声歌唱，或改变录音的口音和情绪。
对于音乐制作人而言，Fugatto 可以帮助他们快速制作原型或编辑歌曲创意，尝试不同的风格、声音和乐器，同时添加效果并提高现有轨道的整体音频质量。
广告代理商则可以利用 Fugatto 快速定位多个地区或情况的现有广告活动，将不同的口音和情感应用于画外音。
视频游戏开发人员则可以使用该模型修改游戏中预先录制的素材，或根据文本说明和可选的音频输入动态创建新素材。
另外，Fugatto 的新颖性主要体现在以下方面：
首先，在推理过程中，该模型采用了称为 ComposableART 的技术，能够组合在训练期间只能单独看到的指令。
例如，通过组合提示，可以要求模型以法国口音说出带有悲伤情绪的文本。
此外，该模型在指令之间进行插值的能力使用户能够对文本指令进行精细控制，如重音的沉重程度或悲伤的程度。
其次，Fugatto 还能够生成随时间变化的声音，NVIDIA 将这一功能称为时间插值。
例如，它可以模拟暴雨穿过区網域的声音，雷声逐渐增强，然后慢慢消失在远处。这一功能使用户能够精细地控制音景的演变方式。
最后，与大多数只能重现所接触的训练数据的模型不同，Fugatto 允许用户创建以前从未见过的音景。
例如，它可以模拟雷雨随着鸟儿的歌声缓和为黎明的场景。
总而言之，Fugatto 凭借其功能多样性和创新性，在音频领網域具有广阔的发展空间。
