英伟达(NVDA.US)推出了一款用于生成音乐和音频的新型人工智能(AI)模型,旨在为制作音乐、电影和视频游戏的人们提供服务。
根据英伟达的说法,这款模型名为Fugatto(Foundational Generative Audio Transformer Opus),可以使用任何文本和音频文件来生成或修改音乐和声音。

例如,该模型可以根据文本提示创建音乐片段,从现有歌曲中删除或添加乐器,改变声音中的口音或情绪,甚至发出从未听过的声音。
英伟达应用音频研究经理、管弦乐队指挥兼作曲家Rafael Valle表示:“我们希望创建一个能像人类一样理解和产生声音的模型。”
英伟达指出,广告代理商可以使用Fugatto快速定位多个地区的现有广告,并在配音中加入不同的口音和情感。此外,视频游戏开发者可以使用人工智能模型修改游戏中预先录制的资产,以适应用户在玩游戏时不断变化的动作。
Fugatto可以使小号发出狗吠声或萨克斯管发出喵喵声。该公司补充说,通过微调和少量的歌唱数据,研究人员发现它可以处理未经预先训练的任务,比如从文本中生成高质量的歌声。
英伟达表示,Fugatto的完整版本使用了25亿个参数,并在包含32个Nvidia H100 Tensor Core GPU的Nvidia DGX系统上进行了训练。该模型的整体工作耗时一年多。
Fugatto可能会与Runway等初创公司以及 Meta Platforms(META.US)等大公司的类似技术展开竞争。10月,Meta 发布了名为Movie Gen的人工智能模型,该模型可以根据用户提示创建逼真的视频和音频剪辑。
今年 2 月,ChatGPT制造商OpenAI推出了Sora,它可以根据文本指令创建逼真且富有想象力的场景。这家由微软(MSFT.US)支持的公司尚未向公众发布文本转视频模型。
多家香港券商场外期权业务“出事”! 据证券时报消息,今年国庆前后,A股市场上演连续上涨的“逼空”式行情,造成诸多香港券商...
TipRanks为独立第三方,提供金融分析师的分析数据,并计算分析师推荐的平均回报率和胜率。提供的信息并非投资建议,仅供参考。本文不对评级数据和报告的完整性与准确性做出认可、声明或...
日前,重庆证监局披露一则针对券商高管“老鼠仓”的罚单。 罚单显示,重庆证监局对湘财证券前任总裁、高级顾问孙...
专题:2024ESG全球领导者大会 “2024 ESG全球领导者大会”于10月16日-18日在上海召开。生物多样性平台召集人,世界自然基金会(WWF)前总干事...
12月9日,中共中央政治局召开会议。会议指出,明年要坚持稳中求进、以进促稳,守正创新、先立后破,系统集成、协同配合,实施更加积极的财政政策和适度宽松的货币政...