当前位置:首页 > 技术分享 > 正文内容

Stability AI 偷偷发布黑科技,秒杀Suno AI 的音乐生成!

lmwmm2年前 (2024-08-21)技术分享1288

Stability AI 偷偷发布黑科技,秒杀Suno AI 的音乐生成!

AI 圈又有大新闻啦!Stability AI 又悄悄放出一个大招,这次不再是画图,而是音乐生成!而且还是开源的!

这个新工具叫 Stable Audio Open,简单来说,用文字就能生成各种音频——无论是鼓点、旋律,还是环境音效,全都不在话下!最最最重要的是,它还能为 Sora 和可灵 这些视频生成配音!接下来我介绍3种使用方法

1.最简单在线使用

Stable Audio 2.0

点击前往

 

Stability AI 偷偷发布黑科技,秒杀Suno AI 的音乐生成!

 

2.本地一键安装包:点击下载】,适合新手,低配的电脑也能运行,但是效果没有第3种好!
Stability AI 偷偷发布黑科技,秒杀Suno AI 的音乐生成!

3.手动安装

首先,将存储库克隆到本地机器:

git clone https://github.com/RoyalCities/RC-stable-audio-tools.git
cd RC-stable-audio-tools

创建虚拟环境

Windows :

python -m venv venv
venv\Scripts\activate

macOS 和 Linux:

python3 -m venv venv
source venv/bin/activate

安装所需的软件包

安装稳定的音频工具和必要的软件包setup.py

pip install stable-audio-tools
pip install .

 

Windows 用户的额外步骤

 

为了确保 Gradio 使用 GPU/CUDA 而不是默认使用 CPU,请卸载并重新安装torch、,torchvisiontorchaudio使用正确的 CUDA 版本:

pip uninstall -y torch torchvision torchaudio
pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu121

配置

 

config.json根目录中包含一个示例。对其进行自定义以指定自定义模型和输出的目录(.wav 和 .mid 文件将存储在此处):

{
   "model_directory": "models",
   "output_directory": "generations"
}

使用方法

 

Stability AI 偷偷发布黑科技,秒杀Suno AI 的音乐生成! 运行 Gradio 界面

 

使用批处理文件或直接从命令行启动 Gradio 界面:

  • 批处理文件示例:

@echo off
cd /d path-to-your-venv/Scripts
call activate
cd /d path-to-your-stable-audio-tools
python run_gradio.py --model-config models/path-to-config/example_config.json --ckpt-path models/path-to-config/example.ckpt
pause

或命令行:

python run_gradio.py --model-config models/path-to-config/example_config.json --ckpt-path models/path-to-config/example.ckpt

Stability AI 偷偷发布黑科技,秒杀Suno AI 的音乐生成! 生成音频和 MIDI

 

Gradio 界面中的输入提示会生成音频和 MIDI 文件,这些文件将按照 中指定的方式保存config.json

该界面已经扩展了 Bar/BPM 设置(可修改用户提示 + 样本长度条件)、MIDI 显示 + 转换,还具有动态模型加载功能。

模型必须与附带的配置文件一起存储在其自己的子文件夹中。即,一次微调可以有多个检查点。所有相关检查点都可以放在同一个“model1”子文件夹中,但重要的是,它们的相关配置文件包含在与检查点本身相同的文件夹中。

要切换模型,只需使用下拉菜单选择要加载的模型,然后选择“加载模型”。

 


扫描二维码推送至手机访问。

版权声明:本文由点度点度金讯时代-BLOG发布,如需转载请注明出处。

本文链接:https://www.lmwmm.com/post/3730.html

分享给朋友:

“Stability AI 偷偷发布黑科技,秒杀Suno AI 的音乐生成!” 的相关文章

「ChatGPT最强竞品」爆火:不限量不要钱免注册!一手实测体验在此

「ChatGPT最强竞品」爆火:不限量不要钱免注册!一手实测体验在此

金磊 丰色 发自 凹非寺免费、支持中文、无需注册、不用骚操作直接可用的类ChatGPT产品,它来了!(此等好事必须第一时间和家人们分享)毫不意外的,目前它的热度已经被炒到不行:而且已经有一波网友抢先体验了一番,铺天盖地的一致好评。例如微博博…

用ChatGPT写假新闻!深圳一自媒体公司法人代表被抓

用ChatGPT写假新闻!深圳一自媒体公司法人代表被抓

ChatGPT问世以来,引发了不小的争议。最让人担心的事发生了——有人用它制作假新闻!此前,一篇题为《今晨甘肃一火车撞上修路工人致9人死亡》的“新闻”吸引了甘肃省平凉市警方的注意,并引发网友关注。经判定,这是一篇假新闻,警方进一步侦查发现,…

AI孙燕姿翻唱爆火,多亏这个开源项目!广西老表带头打造,上手指南已出

AI孙燕姿翻唱爆火,多亏这个开源项目!广西老表带头打造,上手指南已出

AI孙燕姿这么快翻唱了这么多首歌,到底是咋实现的?关键在于一个开源项目。最近,这波AI翻唱趋势大火,不仅是AI孙燕姿唱的歌越来越多,AI歌手的范围也在扩大,就连制作教程都层出不穷了。而如果在各大教程中溜达一圈后就会发现,其中的关键秘诀,还是…

ROG Phone 8系列PG震撼登场:专为游戏玩家量身打造,新特性一览!

ROG Phone 8系列PG震撼登场:专为游戏玩家量身打造,新特性一览!

PG SOFT电子科技消息,华硕在美国CES展会上举办了ROG发布会,展示了全新升级的ROG系列笔记本电脑,并提前推出了新一代的ROG Phone 8系列电竞手机,让玩家在PG游戏官方下载APP玩PG爆分游戏。ROG Phone 8系列包括…

《Palworld幻兽帕鲁》新奇生存游戏PG抢先体验即将开放,带你探索未知!

《Palworld幻兽帕鲁》新奇生存游戏PG抢先体验即将开放,带你探索未知!

日本游戏开发商PocketPair即将在PC Steam、PG SOFT电子游戏等平台上推出一款支持中文和其他多种语言的开放世界生存游戏——《Palworld幻兽帕鲁》(パルワールド)。这款游戏将于1月19日16:00起在Xbox One、…

PG手机电子新崛起:华为、小米斩获成功,全球游戏品牌TOP10揭晓

PG手机电子新崛起:华为、小米斩获成功,全球游戏品牌TOP10揭晓

在CES 2024展会期间,全球领先品牌评选揭晓,手机领域迎来了一场激烈的角逐。苹果、三星、华为、荣耀、oppo、vivo、小米、真我realme、TECNO、一加等品牌成功入选“2023-2024年度全球智能手机领先品牌TOP10”。这一…