ステム分離の仕組み
ステム分離は、完成したステレオ曲から、各楽器グループが単体でどう鳴っていたかを推定します。AudioDropは2パスで行うので、プログレスバーを見つめ続ける必要はありません。
まず、速いスペクトル分離が約1秒で粗いプレビュー分離を出します。再生を押して、すぐ探れます。そのあとAIモデルのHTDemucs（Meta AIの研究によるHybrid Transformer Demucs）がバックグラウンドで動き、プレビューをずっときれいな結果に差し替えます。
モデルはWebAssemblyで、複数のCPUコアを並列に使います。最近のノートPCではAIパスは実時間より速く、およそ3分の曲が1分未満です。古いマシンとスマホはより時間がかかります。
各ステムの中身
4つのステムが手に入ります。それぞれに通常入るものです。
| Stem | 含まれるもの | 典型的な用途 |
|---|---|---|
| ボーカル | リードとバックボーカル、話し声のパート | アカペラ、リミックス、ボーカル研究 |
| ドラム | キック、スネア、ハット、シンバル、パーカッション | サンプリング、ドラムの採譜 |
| ベース | ベースギター、シンセベース、808 | ベースの練習、低域の研究 |
| その他 | ギター、キーボード、シンセ、パッド、ストリングス | インストの伴奏、コードの研究 |
分けたステムでできること
曲を一度分離すると、ステムを好きなように組み直せます。よくある作業：
- ボーカルをミュートしてインストを作る。
- ボーカルをソロにして、リミックスやマッシュアップ用のアカペラを取り出します。
- 自分のパートをミュートして、ドラム、ベース、ギターを練習します。
- ソロにしてすべての音が聞こえるようにし、忙しいパートを採譜します。
- 各要素が単体でどう座っているかを聴き、ミックスを研究する。
- ブレイクダウンでドラムを抜いて、DJエディットを作る。
いちばんきれいな音源分離のためのヒント
手元でいちばんよい音源から始めてください。WAV、FLAC、高ビットレートのMP3は、低いビットレートの配信リップより、AIモデルが使える細部が多いです。
ダウンロードの前にAIパスを待ってください。プレビューは聴くためのもので、残したいのは仕上げた分離です。はっきり分かれたパートのある現代のスタジオ制作がいちばんよく分かれます。密度の高いライブ録音はより難しいです。
ステム単体が細く聞こえるなら、文脈の中で確認してください。ほかのステムを低めに戻すと、小さなアーティファクトは消えることが多いです。
正直な限界
完璧なステム分離はなく、これも例外ではありません。ステム間の漏れは聞こえます。たとえばボーカルステムのかすかなハイハットです。リバーブの余韻とバックボーカルは、思わぬ場所に入ることがあります。大きく歪んだギター、ローファイの録音、古いモノラルテープは、現代の制作よりきれいに分かれにくいです。
最初の分離にもAIモデル、約166 MBが必要です。パソコンではバックグラウンドでダウンロードします。スマホや遅い回線では、サイズと所要時間の目安を示して先に確認します。そのあと端末に保存されます。
プレビュー分離とAI分離
2つの段階は役割が違います。プレビューですぐ試聴でき、残すのはAI分離です。パソコンではAIの処理が終わるとプレビューが置き換わります。スマホや遅い回線では、166 MBのモデルをダウンロードする前にAudioDropが確認し、クイック分離のままにすることもできます。
ステム分離を初めて使うとき、ブラウザがAIモデル、約166 MBを取得します。これは一度だけです。保存されたあとは、ページを閉じても開き直しても、新しい曲はすぐ分離に進みます。端末のメモリが不足しても、クイック分離は再生とダウンロードに残っています。
| 機能 | プレビュー分離 | AI分離（HTDemucs） |
|---|---|---|
| 準備まで | 約1秒 | 最近のノートPCでは実時間より速い |
| 方法 | 速いスペクトル分離 | Hybrid Transformer Demucsモデル |
| 音質 | 粗い。漏れが多い | ずっときれいなステム |
| 向いている用途 | すばやい試聴と確認 | ダウンロードと実際の作業 |
| モデルのダウンロードが必要 | いいえ | 一度、約166 MB。そのあとキャッシュ |
アップロード不要のステム分離
ほとんどのオンラインステム分離は、曲をサーバーに送ります。AudioDropはAIの音源分離をすべてブラウザ上で行うので、ファイルは端末の外に出ません。アカウントも順番待ちも透かしも、曲ごとの料金もありません。
デスクトップのChrome、Edge、Firefox、Safariで動きます。iPhoneとAndroidのモバイルブラウザでも動きますが、AIモデルはスマホでは重いので、長い曲にはノートPCの方がよいです。他人の音楽から作ったものを公開するなら、権利があることを確認してください。