音轨分离怎么工作
音轨分离拿一首做好的立体声歌曲,估计每一组乐器单独听是什么样。AudioDrop 分两遍做,你不用盯着进度条。
首先,快速频谱分离大约一秒就能给出粗略的预览分离。你可以马上播放,开始试听。然后 AI 模型 HTDemucs(Hybrid Transformer Demucs,来自 Meta 的 AI 研究)在后台运行,用干净得多的结果换掉预览。
模型用 WebAssembly 在多个 CPU 核心上并行跑。较新的笔记本上,AI 这一遍比实时更快,大约 3 分钟的歌不到 1 分钟。老设备和手机会更久。
每条分轨里有什么
你会得到四条分轨。下面是每条里通常有什么。
| 分轨 | 里面有什么 | 典型用途 |
|---|---|---|
| 人声 | 主唱、和声、口白 | 纯人声、混音、学人声 |
| 鼓 | 底鼓、军鼓、踩镲、镲片、打击乐 | 采样、鼓谱扒带 |
| 贝斯 | 电贝斯、合成器贝斯、808 | 贝斯练习、低频学习 |
| 其他 | 吉他、键盘、合成器、Pad、弦乐 | 伴奏底,和弦学习 |
分开的分轨能做什么
一首歌分离之后,分轨可以按你想要的任何方式重新组合。几种常见用法:
- 把人声静音,得到伴奏。
- 把人声独奏出来,提取纯人声,用来做混音或串烧。
- 把自己的声部静音,跟着练鼓、贝斯或吉他。
- 把很满的一段独奏出来听写,这样每个音都听得见。
- 把每个元素单独听一遍,看混音是怎么摆的。
- 做一段 DJ 剪辑,在 breakdown 里把鼓拿掉。
分轨分离更干净的技巧
从你手头最好的源文件开始。WAV、FLAC,或高码率 MP3,比低码率的流媒体抓取给模型更多细节。
等 AI 处理完再下载。预览是用来听的,精修后的分离才是该留下的。声部清楚的现代录音室作品分离得最好。现场录音太密就更难。
如果一条分轨单独听很薄,放到整首里再听。其他分轨以较低的音量加回来之后,小瑕疵常常就听不见了。
要说清楚的限制
没有音轨分离是完美的,这个也一样。分轨之间会有串音,比如人声分轨里带一点踩镲。混响尾音和和声可能落到奇怪的位置。重度失真的吉他、Lofi 录音和老单声道磁带,分离得不如现代制作干净。
第一次分离也要 AI 模型,大约 166 MB。电脑上它在后台下载。手机或慢网络会先问你,并给出体积和预计时间。之后就存在设备上。
预览分离和 AI 分离
两遍做的事不一样。预览让你马上能听。要留下的是 AI 分离。电脑上,AI 这一遍做完会换掉预览。手机或慢网络上,AudioDrop 下载 166 MB 模型之前会先问,你也可以继续用快速分离。
第一次用音轨分离,浏览器会拉取 AI 模型,大约 166 MB。这是一次性的。存好之后,就算关掉再打开页面,新歌也会直接进入分离。设备内存不够时,快速分离仍然可以播放和下载。
| 功能 | 预览分离 | AI 分离(HTDemucs) |
|---|---|---|
| 耗时 | 大约一秒 | 在较新的笔记本上比实时更快 |
| 方法 | 快速频谱分离 | Hybrid Transformer Demucs模型 |
| 质量 | 比较糙,串音更多 | 分轨干净很多 |
| 适合 | 快速试听和检查 | 下载后正式使用 |
| 需要下载模型 | 否 | 一次,大约 166 MB,之后会缓存 |
音轨分离,无需上传
大多数在线音轨分离会把歌发到服务器。AudioDrop 把整套 AI 音轨分离放在浏览器里跑,文件不会离开这台设备。不用注册账号,不用排队,没有水印,也不按首歌收费。
桌面版Chrome、Edge、Firefox和Safari都能用。iPhone和Android的手机浏览器也能跑,但AI模型在手机上很吃资源,长歌更适合用笔记本。如果发布基于别人音乐做的内容,请确认你有版权。