Show HN: スマートグラスによる手話翻訳

こんにちは！ 私の親戚は手話を話しますが、近年AIが目覚ましい進歩を遂げているにもかかわらず、この問題がいくぶん軽視されているように感じていました。 特にウェアラブル技術の登場により、私の知る限り、Metaグラスと指文字翻訳ソフトウェアを統合した最初のプロジェクトです。 技術的な側面としては、GoogleのFSboardデータセットでニューラルネットワークを訓練し、CNN + GRUテンポラルエンコーダーアーキテクチャ（CTCで訓練済み）をモデル化しました。その後、CTCビームサーチとKenLM言語モデルで出力をデコードし、モデルのいくつかの欠点を解決しました。 クロスプラットフォーム（Web + iOS）にも対応しており、Web画面共有やスマートグラス以外のデバイスの使用も可能です。このプロジェクトは完全にFOSS（フリー・オープンソースソフトウェア）です。 現在、オンデバイスモデルをクリーンに動作させることに取り組んでいますが、残念ながら低スペックのデバイスではパフォーマンスが低下するため、今のところモデルはModalでホストしています。 改善の余地はたくさんありますが、この出発点には満足しています。ぜひご意見をお聞かせください。YouTubeのデモもチェックしてみてください！