本次分享一个非常强大的音乐音效生成软件AudioX，这个软件可以通过提供文本、视频、图像、音乐和音频自动识别内容重新生成一段高质量的通用音频和音乐。
AudioX介绍
音频和音乐生成已成为众多应用中的关键任务，然而现有方法面临诸多限制：它们各自为政，缺乏跨模态的统一能力，缺乏高质量的多模态训练数据，并且难以有效地整合不同的输入。在本研究中，我们提出了 AudioX，一个用于“任何内容到音频”和“音乐”生成的统一的扩散变换器 (Diffusion Transformer) 模型。与以往的特定领域模型不同，AudioX 可以生成高质量的通用音频和音乐，同时提供灵活的自然语言控制，并无缝处理包括文本、视频、图像、音乐和音频在内的各种模态。其关键创新在于一种多模态掩蔽训练策略，该策略可以掩蔽跨模态的输入，并迫使模型从掩蔽的输入中学习，从而产生稳健且统一的跨模态表征。为了解决数据稀缺问题，我们整理了两个全面的数据集：基于 VGGSound 数据集的包含 19 万条音频字幕的 vggsound-caps，以及源自 V2M 数据集的包含 600 万条音乐字幕的 V2M-caps。大量实验表明，AudioX 不仅能与最先进的专业模型匹敌或超越它们，而且在统一架构内处理各种输入模式和生成任务方面也具有出色的多功能性。
AudioX整合包使用说明
首先将网盘内的软件压缩包下载到本地电脑上并解压，然后双击启动软件.exe打开软件启动webui
稍等片刻启动成功后会自动打开webui页面。
webui界面提供了文本合成音效和音乐，视频生成音效和音乐功能。
首先在顶部prompt输入框中输入想要生成音频内容的英文描述词。然后点击下面的Generate按钮即可生成音频或是音乐。你可以在下方Sampler Params中设置sample size值来设置音频时长，原来音频只能生成10秒，这里给稍微做了下代码修改。音频时长=sample size÷sample rate。
如果想给视频增加音效的话，可以在Video Path中输入视频路径或是点击下方Upload Video File上传视频文件。
可以输入文本描述词为视频添加指定音效，也可以让软件自动识别视频内容自动添加音效。
##代码略作修改，解除10秒音频时长限制
视频教程及效果演示：https://nuowa.net/1789
注意事项
软件整合包只支持英伟达30或40系列显卡电脑
只支持windows10或11
软件运行路径中不要有非英文字符和空格，待处理文件同样要注意
音乐音效生成软件AudioX整合包下载链接
相关推荐
最近更新
凡人修仙传动画韩立高清图片壁纸素材AI绘画图集
恭迎韩天尊！ 祝贺韩天尊顺利结婴！ 热门国漫凡人修仙传动画已经更新了5年了，最新一集，主人公韩立顺利结婴，成为一名元婴修士。我属于是比较喜欢看动漫的，看过的动漫估计没过百也得大几十了，热门国漫大多都看过。凡人修仙传算是最喜欢的动漫之一，韩立...
凡人修仙传动画紫灵高清图片壁纸素材AI绘画图集，AI国漫女神系列
凡人修仙传动画乱星海第一美女紫灵是大家非常喜欢的一个角色，动画人物造型精美，是众多女性角色中最受欢迎之一，热度极高。很多人喜欢收集紫灵的图片，但是视频里截图的话可能截不到喜欢的图，下面分享一些紫灵的AI绘画图片素材，图片都是SD生成的，都是...
凡人修仙传动画宋玉高清图片壁纸素材AI绘画图集，AI国漫女神系列
凡人修仙传动画里宋玉是大家比较喜欢的一个角色，动画人物造型精美，当前热度极高。虽然凡人修仙传原著里只是韩老魔的弟子，但是很多短视频创作者非常能整活，已经把宋玉纳入韩老魔后宫了。很多人喜欢收集宋玉的图片，但是视频里截图的话可能截不到喜欢的图，...
凡人修仙传动画人物梅凝高清壁纸素材AI绘画图片，AI国漫女神系列
有些人比较喜欢凡人修仙传动画里梅凝这个角色，视频里截图的话可能截不到喜欢的图，下面分享一些梅凝的AI绘画图片素材，图片都是SD生成的，都是高清大图，非凡人修仙传动画视频截图。部分梅凝图片如下： 图片及模型文件下载链接： https://pa...
凡人修仙传动画人物范静梅高清壁纸素材图片，AI国漫女神系列
本次分享的是凡人修仙传动画人物范静梅的AI图片素材，图片都是SD生成的，都是高清大图，非凡人修仙传动画视频截图。部分范静梅图片如下： 图片及模型文件下载链接： https://pan.xunlei.com/s/VOXgauAl7VsuksE...
凡人修仙传动画银月高清壁纸素材图片，AI国漫女神系列
本次分享的是凡人修仙传动画人物银月AI图片素材，图片都是SD生成的，都是高清大图，非凡人修仙传动画视频截图。这次生成的不多，部分图片如下： 图片及模型文件下载链接： https://pan.quark.cn/s/1bd714c2d5e7 h...
图片元数据信息删除工具，支持windows/mac/Linux
有些图片可能会附带很多的信息，如果你想把图片的元数据信息删除的话，可以使用exifcleaner，这是一款用于清理图像元数据的跨平台桌面 GUI 应用程序，软件支持支持 Linux、macOS 10.10+ 和 Windows 7+（仅限 ...
凡人修仙传动画慕沛灵高清壁纸图片，单人AI图片素材
最近需要用到凡人修仙传动画里人物图片，直接在视频里截图的话要么身体姿势不对要么就身体不完整等，截不到想要的图，然后就炼了一批AI图，这次分享的这些都是慕沛灵的单人图片，全身照，都是高清的，由于只需要竖屏，所以我没生成横屏图片。喜欢的可以拿去...
免费在线视频去水印工具方法
本次分享一个免费的在线视频去水印工具–记灵 这个在线工具目前是完全免费的，上传mp4视频文件，然后鼠标框选去水印区域，然后点击处理等待处理完成就可以了，操作非常简单。 这个去水印工具是采用打码的方式覆盖原水印区域的，并不是AI智...
即梦AI(可灵)视频制作9种电影级运镜提示词，小白秒变大导演
视频制作方式多种多样，想做出一个观感体验极佳的精彩视频，运镜效果少不了。这里整理了9种实用的电影级运镜方式，学会这些运镜小白也可以成为大导演。你可以将这些运镜效果用在即梦或可灵AI中视频生成的时候，提供了运镜参考关键词，如果不会写关键词的，...
