AI・機械学習
Show HN: 1億2500万パラメータのモデルをトレーニングし、オンデバイスでピアノの自動補完を実現
Show HN: I trained a 125M model to autocomplete piano on-device (simedw.com)
要約
開発者は、1億2500万パラメータのTransformerモデルをトレーニングし、iPhone 15上でリアルタイム(毎秒約108ノート)でピアノ演奏の自動補完を行うアプリを開発しました。このモデルは、コードではなくMIDIピアノの数音をプロンプトとして受け取り、完全にオンデバイスで演奏を続けます。アプリは無料で試用でき、モデル、トレーニング、Core ML、および開発中に発生した多くの問題点について質問を受け付けています。
全文翻訳
1億2500万パラメータのTransformerモデルをトレーニングし、リアルタイム(iPhone 15上で毎秒約108ノート)でピアノ演奏の自動補完を実現しました。
基本的なアイデアは、GitHub CopilotやTabnineのようなものですが、コードをプロンプトとして使う代わりに、MIDIピアノの数音を演奏してプロンプトとします。モデルは、あなたが演奏したものを、完全にオンデバイスで引き継ぎます。
希望する方は、このアプリを無料で試すことができます。モデル、トレーニング、Core ML、そしてうまくいかなかった多くのことについて、喜んで質問にお答えします。