AI・機械学習
StemDeck: 無料、オープンソース、ローカルAIによるステム分離ツール
StemDeck, a free, open-source and local AI stem separator (github.com)
要約
StemDeckは、アカウント登録やアップロード、サブスクリプション不要で、ローカル環境で動作する無料のAIステム分離ツールです。MP3やYouTube URLなどの音源をボーカル、ドラム、ベース、ギター、ピアノ、その他最大6つのステムに分離し、DAWスタイルのミキサーで編集・エクスポートできます。プライバシーを重視し、すべての処理がユーザーのPC上で行われるため、安心して利用できます。
全文翻訳
無料、ローカルでのステム分離。アカウント不要。アップロード不要。サブスクリプション不要。
コミュニティに参加する
MP3、WAV、FLAC、OGG/Opus、MP4、またはM4Aファイルをドロップするか、YouTube URLを貼り付けると、StemDeckはオーディオを最大6つのステム(ボーカル、ドラム、ベース、ギター、ピアノ、その他)に分割します。DAWスタイルのマルチトラックミキサーで再生します:ミュート、ソロ、レベル調整、波形のズーム、リージョンのループ、個別のステムまたはカスタムミックスのエクスポートが可能です。すべてお使いのコンピューター上でローカルに実行されます。
これは何ですか?
StemDeckはステム分離ツールであり、ダウンローダーではありません。その主な仕事は、あなたが既に所有しているオーディオを処理することです:MP3、WAV、FLAC、OGG、またはM4Aファイルをインポートバーにドラッグして開始します。YouTubeサポートは、処理する権利のあるコンテンツのための便宜的な機能です。StemDeckは、ダウンロードされたコンテンツを保存、キャッシュ、または再配布しません。すべてローカルで実行され、何もあなたのマシンから離れることはありません。
StemDeckは、MoisesやLALAL.AIのようなクラウドベースのステム分離サービスに対する、無料のオープンソースの代替手段です:アカウント不要、クォータ不要、アップロード不要、サブスクリプション不要です。個人的な学習のためにステムが必要で、ローカルで無料のものを好むなら、StemDeckが対応します。もし、洗練された機能、モバイルアプリ、またはより深いミュージシャン向けツールが必要なら、商用製品の方が適しています。
スターヒストリー
推奨
StemDeckは無料で、以下にリストされている誰からも金銭、スポンサーシップ、または資金を受け入れていません。これらのクリエイター、アーティスト、コミュニティを共有するのは、素晴らしい仕事をしている素晴らしい人々を指し示す喜びのためだけです。ぜひ彼らに会いに行ってください ❤️
名前
彼らがやっていること
リンク
Analog4Lyfe
オールアナログの音楽機材、デジタルなショートカットなし
@analog4lyfe
r/bass
私の愛するベースコミュニティ(reddit)
r/Bass
Beltr
あなたが既に所有している曲を、あなたのマシン上で、サブスクリプションやクラウドなしで、あなたとマイクだけでカラオケの金字塔に変えます
beltr.app
Dlima Guitars
カスタムギターとベース、一度に1本ずつ製作
@dlimaguitars
Empress Effects
妥協しないトーンを追求する人のためのブティックエフェクトペダル
empresseffects.com
Joao Gaspar
プロデューサー兼映画作曲家、ツアー/セッションミュージシャンとしても活動
@jay_glaspar
Kris Luthier
リスボンで楽器を手作業で修理・修復、一つ一つ丁寧に
@krisluthier
Lisbon Guitar Works
リスボンで手作りのギター
dlimaguitars.com
More Notes Less Talk
個性的な楽器と機材、テープに生録音。誇大広告なし、ゲートキーピングなし。
@morenoteslesstalk
Seratone
どんなテレビもスタジオグレードのカラオケステージに変える
seratone.audio
slashCAM
ドイツ語圏のカメラ・ビデオ技術:実践的なテスト、業界ニュース、ほとんどのレビューが見落とすポストプロダクションの詳細
@slashcam.de
Thomann
ヨーロッパ最大級の楽器小売店、ミュージシャンが必要とするほぼすべてのものがあります
@thomann.music
機能
Demucs htdemucs_6sによる6ステム分離。最適なTorchデバイス(NVIDIAのCUDA、Apple SiliconのMPS、CPUフォールバック)の自動検出。
YouTubeとローカルファイルインポート。
YouTube URLを貼り付けるか、MP3、WAV、FLAC、OGG/Opus、MP4、またはM4Aをインポートバーに直接ドロップします。
DAWスタイルの波形エディター。全ステムの最小/最大サンプルレンダリング、共有正規化、ズームイン/アウト/フィット、ルーラー上のループドラッグ、ゴールドプレイヘッドオーバーレイ、ステム同期レーン。
ステムサブセット抽出。
ステムチップをクリックして、保持するステムを選択します。「すべて選択」からクリックすると「これのみ」にスナップし、その後のクリックで追加または削除します。
「オリジナル」バッキングトラック。
サブセットを選択すると、7番目のレーンに補完(選択したステムを除くフルソング)が含まれ、倍音なしでのA/B参照に最適です。
ダウンロード可能な選択済みミックス。
選択したステムのみを単一のmix.wavとしてエクスポート(ffmpeg amixを使用)。
ステムごとのミキサー。ボリュームフェーダー、ミュート、ソロ、各ステムの「モニター」(ソロのみ)機能。
プレビューミキサーとステムサイドバー間で状態が同期します。
ステムごとのライブVUメーター。
ポストゲインRMS(Web Audioアナライザーを使用、ピークホールドとスローフォールオフ付き)。
曲分析。BPM(librosaビートトラッカー)、キー、スケール、信頼度(Albrecht-Shanahanプロファイル)、統合LUFS(BS.1770)、dBFSでのサンプルピーク。
キャンセル可能なジョブ。
パイプラインの途中でキャンセルすると、ランナーはアクティブなサブプロセスを即座に終了し、部分的なジョブディレクトリを削除して、準備完了状態に戻ります。
ライブラリパネル。フォルダベースのトラック整理、ドラッグ&ドロップ、検索、ゴミ箱機能。
正直な比較
StemDeckは、商用ステム分離製品と競合しようとはしていません。コアなユースケースをうまくカバーし、そこで止まります。この表は、後でギャップを発見するのではなく、情報に基づいた選択をするために存在します。
StemDeck
Moises / LALAL.AI / 同様
価格
無料、永続的
フリーミアム;通常使用にはクレジットまたはサブスクリプションが必要
ホスティング
完全にあなたのマシンで実行
クラウド;オーディオをサーバーにアップロードする必要がある
アカウント/ログイン
不要
必要
インターネット接続
YouTubeダウンロードと最初のモデル取得時のみ(約170MB、その後キャッシュ)
常に必要;オフライン使用不可
プライバシー
オーディオはあなたのマシンから離れない
オーディオはサードパーティサーバーにアップロードされ処理される
データ保持期間
あなたがコントロール;いつでも削除可能
彼らのプライバシーポリシーと保持期間に従う
ステムモデル
Demucs htdemucs_6s(オープンソース、Meta AI)
プロプライエタリモデル、定期的に更新、一般的に高品質
ステム数
6(ボーカル、ドラム、ベース、ギター、ピアノ、その他)
サービスやプランに応じて最大10
入力フォーマット
YouTube URL、MP3、WAV、FLAC、OGG/Opus、MP4、M4A
MP3、WAV、FLAC、M4Aなど(サービスによる)
処理速度
ハードウェアに依存;GPUでは高速、CPUでは低速
ハードウェアに関係なく高速(サーバーで実行)
バッチ処理
一度に1つのジョブ
はい(有料プランの場合)
モバイルアプリ
なし
iOSおよびAndroid
追加機能
なし(ピッチシフト、コード検出、歌詞、クリックトラック、BPMタップなし)
はい(製品による)
UIの洗練度
機能的、ホビーグレードUI
洗練された、プロダクショングレードのアプリ
ソースコード
オープンソース、フォーク可能、セルフホスト可能
クローズドソース
スピード、品質、モバイルアクセス、または追加のミュージシャン向けツールが必要な場合は、商用製品にはそれだけの価値があります。個人的な学習のためにステムが必要で、オーディオをプライベートに保ちたい、または単に何の制約もなくローカルで動作するものを求めているなら、StemDeckで十分です。
ダウンロード
各GitHubリリースにプリビルドインストーラーとzipファイルが添付されています。
macOS DMG
GPUチップ
StemDeck-macOS-arm64.dmg
Apple Silicon (MPS)
M1以降
StemDeck-macOS-x64.dmg
CPUのみ
Intel
DMGを開き、StemDeckをApplicationsにドラッグして起動します。初回起動時にセットアップ画面でPythonランタイム(約500MB)、FFmpeg、Demucsモデル(約170MB)がダウンロードされます。 subsequent launches skip setup and start in seconds. Pythonまたはシステム依存関係は不要です。macOSでは初回起動時にGatekeeperプロンプトが表示される場合があります。右クリックして「開く」を選択してバイパスしてください。
Windows Zip
GPU
おおよそのサイズ
StemDeck-Windows-x64.zip
CPUのみ
約700MB
StemDeck-Windows-x64.NVIDIA.zip
NVIDIA CUDA
約1.6GB
zipファイルを任意の場所に解凍し、StemDeck.exeを実行します。FFmpeg、Demucsモデル、設定、ログは、StemDeck.exeの隣のdata/フォルダ内に保存され、AppDataには保存されません。フォルダ全体を移動またはコピーしても機能します。初回起動時に、バンドルされたPythonランタイムが検証され、FFmpegとDemucsモデル(約170MB)がそのフォルダにダウンロードされます。 subsequent launches skip this and start in seconds. すべて自己完結型で、Pythonまたはシステム依存関係は不要です。ジョブ/ライブラリデータは通常の位置(デフォルトでは~/Documents/StemDeck)に保存され、設定→StemData locationからいつでも移動可能です。
テクノロジー
StemDeckはuvで管理されるPython 3.12上に構築されており、FastAPIバックエンドがRESTおよびServer-Sent Eventsを提供します。ステム分離には、Meta AIのオープンソース6ステムニューラルネットワークであるDemucs(htdemucs_6s)を使用します。オプションのオンデマンドリード/バッキングボーカル分割は、Ultimate Vocal Removerプロジェクトの一部としてAnjok07によってトレーニングされたUVR-MDX-NET Karaoke 2モデルをaudio-separator経由で実行します。YouTubeオーディオはyt-dlp経由で取得され、トランスコーディングとミキシングにはFFmpegを使用します。BPM検出とキー分析はlibrosaで実行され、ラウドネス測定にはpyloudnorm(ITU-R BS.1770)を使用します。macOSおよびWindowsのデスクトップシェルはTauri v2(macOSではRust/WKWebView、WindowsではRust/WebView2)です。フロントエンドはWeb Audioを使用したバニラJSです。