Audacity增加Intel支持的免费AI音频编辑及音乐生成、混音、分离等功能

毫无疑问,Audacity是最受欢迎的免费音频编辑应用之一,最近引入了由Intel的OpenVINO AI工具包提供支持的新插件套件。这意味着现在你可以在Audacity内部使用人工智能进行音轨分离、音乐生成、配音转录等操作,而所有这些都是在你的个人电脑上本地执行的。

Audacity的新AI工具包括:

1.噪声抑制:过滤音乐和对白中的背景噪音。

2.转录:由Whisper.cpp驱动,能够将单词转录到标签音轨,并(另外)输出到外部文件。

3.音乐生成:利用Stable Diffusion和Riffusion从提示或现有音乐中生成新音乐。

4.音乐分离:能够将歌曲分隔为单独的乐器,包括人声。

Audacity x Intel OpenVINO:音频编辑的新层次

Audacity最近与Intel合作开发了一套由人工智能驱动的插件套件。这使得Audacity开启了一系列以前无法实现的可能性,包括音轨分离、转录以及从文本提示或现有音轨生成新音乐。

 

 

音乐生成和音乐风格混搭工具都采用了稳定的Diffusion AI模型和特别的Riffusion。这不仅使您能够使用文本提示生成新音乐,还能够通过音乐风格混搭工具,基于预先存在的音轨创建新音乐。只需选择音频文件的一部分,并用简单的英语告诉模型如何处理即可。

新的AI功能为播客带来了新体验

除此之外,Intel为Audacity提供的新人工智能工具还包括一些对播客、编辑配音或其他口述文字应用非常有用的功能。新的噪音抑制插件使消除不想要的背景噪音变得轻而易举。此外,还有一项由Whisper.cpp支持的新的转录功能,可以自动转录和翻译配音,并将其输出到标签音轨。

据Audacity称,新的人工智能功能在本地运行在你的个人电脑上,因此你的音频不会被上传到世界另一端的某个服务器。尽管这些插件是由Intel开发的,但这符合该软件的开源伦理。正如Audacity的Martin Keary所说:“这只是第一步。我们希望将来能继续与Intel合作开发各种新的人工智能工具。”

从用户界面的角度来看,最初的转录努力与诸如Otter.ai之类的工具相比并不特别令人印象深刻。但它们是免费的,并且可以将转录导出到外部文件。

 

初步的转录工具在用户界面方面似乎较为简陋,与一些竞品相比可能不够引人注目,但它们是免费提供的,转录结果可以导出到外部文件。然而,这些新的AI工具除了受到CPU性能限制外,目前要求安装Audacity的一个旧版本:Audacity 3.4.2。Audacity提供了安装说明,相对简单。

你需要下载Audacity 3.4.2以及两个文件:Audacity-OpenVINO-Module-3.4.2-R1.zip和openvino-models.zip。如果你是第一次下载人工智能模型,请注意它们的大小:模型文件有1.92GB。然后,你需要将这些文件复制到Audacity安装的文件夹中,然后运行Audacity.exe。在Audacity中,转到编辑>首选项,然后将mod-openvino更改为“已启用”。然后需要关闭Audacity并重新打开。

登录网站即可免费获取下方文件:

链接:https://pan.baidu.com/s/1pR_OFIekNRbJGXnoZ1uoqg?pwd=TQLY 提取码:TQLY

唯一的缺点是截至目前,新的AI功能仅适用于Windows。希望它们最终也会推出Mac和Linux版本。