私のサーバーは今や電話だ
My server is a phone now (seg6.space)
要約
著者はHetzner VPSの代わりに、CMF Phone 1をパーソナルサーバーとして活用することにした。当初はLinuxディストリビューションを直接インストールしようとしたが、ハードウェアドライバの問題で失敗した。最終的に、Android上でTermuxをホスト環境として利用し、Androidのドライバを活かしつつLinuxアプリケーションを実行する方式で成功を収めた。このシステム全体はAnsibleで管理されている。
全文翻訳
私のサーバーは今や電話になった
しばらくの間、私の個人インフラは小さなHetzner VPSで稼働していました。いくつかのWebアプリ、リモートブラウザのSurf、Caddy、そして通常のサポートキャストが動いていました。特に重要なものではありませんでしたが、動作していました。ただ、その料金を支払うのが好きではありませんでした。
私が実行しているアプリの一つであるSurfは、この妥協点を無視しがたくしていました。最も安価な共有マシンは、Chromeが本格的な処理を行うまでは問題ありませんでしたが、その時点ではリソース不足を感じました。専用CPUマシンはこの問題を解決しますが、月額料金が個人用ブラウザに投資するには疑問符が付くほどの金額になります。
別のマシンを購入するという選択肢も魅力的ではありませんでした。DRAM価格は完全に馬鹿げたことになっていますので、十分なメモリを搭載した新しいボックスを組み立てるのは特にタイミングが悪く感じられました。中古のミニPCを検討し、一時的にデスクトップをサーバーとして使うことも考えました。そして、すでに所有しているCMF Phone 1のことを思い出しました。
8つのARMコア、8GBのRAM、128GBのフラッシュストレージ、Wi-Fi 6、5Gモデム、そして内蔵バッテリーバックアップ。これらすべてが、引き出しにしまっておくには過剰だと感じるSoCに接続されています。そして、すでにその代金は支払っていました。埃を払い、しばらく触ってみた後、この電話をサーバーにすることにしました。
今日、この電話はSurfとその管理下のChromeインスタンス、私の個人財務トラッカー、画面共有サービス、そしていくつかの小さなWebアプリを動かしています。これらは再起動後も動作し、Gitからデプロイでき、電話がネットワーク間を移動しても到達可能であるため、これがVPSを置き換えたマシンとなりました。
最初にしておいた悪い考え:Androidの置き換え
このアイデアの最もクリーンなバージョンは、通常のLinuxディストリビューションをフラッシュすることでした。CMF Phone 1にはpostmarketOSのデバイスポートがあり、起動し、デバイスページには無謀な人間を楽観的にさせるのに十分な緑色のボックスがありました。結局、私がその人物になりました。
私があまり注意を払わなかったのは、壊れているとマークされていたすべての項目でした:Wi-Fi、Bluetooth、ハードウェアアクセラレーション、そしてこの電話を小さなサーバーとして役立つものにしている他のほとんどの機能です。私はpostmarketOSのスプラッシュスクリーンと黒いディスプレイまでしか到達できませんでした。その時点で、私はサーバーでも電話でもなくなっていました。
ストックのNothing OSを復旧させることは、それ自体が別のサイドクエストとなりました。フラッシュユーティリティはWindowsを必要としたため、QEMUにWindowsをインストールし、USBパススルーとMediaTekドライバーと格闘し、フラッシュツールがハングするのを見て、最終的にプロセスを実際のWindowsインストールに移動させて工場イメージを復元しました。
この途中で、電話がソフトブリックされ、黒い画面しか表示されなくなり、私は本当に正常なデバイスをペーパーウェイトに変えてしまったと思った瞬間がありました。
それは復活しましたが、教訓を得ました:Androidは、このハードウェアのすべての部分に対して、すでに動作するドライバーを持っています。Wi-Fi、電源管理、バッテリー、GPU、モデム、そして奇妙なベンダー固有の詳細もすべてすでに機能しています。より一般的なユーザー空間を追求するために、これらすべてを捨てることは間違ったトレードでした。
私は実際には電話を通常のLinuxマシンにする必要はありませんでした。Androidがハードウェア固有の作業をうまく行い続ける一方で、Linuxアプリケーションを確実に実行する必要があったのです。
Termuxがホストオペレーティングシステムです
2回目の試みでは、ストックのAndroidを維持し、Termuxをホスト環境として扱いました。
Termuxは、OpenSSH、runit、Caddy、Cloudflared、パッケージ管理、そして十分に通常のUnixツールを提供してくれます。Termux:Bootは、再起動後にスーパーバイザーとSSHを開始します。Tailscaleは電話に安定したプライベートアドレスを与えるため、私のテイルネット上のどのマシンからでも、次のように実行できます。
ssh cmf
Termuxは仮想マシンではありません。そのプロセスは依然としてAndroidのLinuxカーネルに対して実行されますが、そのBionicベースのユーザー空間は、通常のDebianインストールとは十分に異なるため、既存のLinuxアプリケーションイメージをそのままドロップすることはできません。しかし、その違いは有用でした。Termuxは小さなホスト制御プレーンとして留まることができ、各アプリケーションは期待するLinuxファイルシステムを持ち込むことができました。
実際のサービスはrunitによって監視されています。Androidのバッテリー管理は、通常のタスクにおいては非常に優れていますが、サーバーを装うデバイスにとっては非常に悪いため、AnsibleビルドでAndroidホストプロファイルも適用しました。これは、永続的なウェイクロックをインストールし、ライトおよびディープアイドルを無効にし、Termux、Termux:Boot、およびTailscaleをバックグラウンド制限から除外し、子プロセス制限を無効にし、Wi-Fiサスペンションを防ぎ、Tailscaleを常にオンのVPNとして設定します。
リカバリチェーンは、個々の設定よりも重要です。Androidが起動し、常にオンのVPNがTailscaleを再接続し、Termux:Bootがrunitを開始し、runitが常駐サービスをすべて開始し、ヘルスチェックがローカルおよびパブリックパスを検証します。電話は、私が気づくのを待つことなく再起動できます。
Androidブート
-> Tailscale常時オンVPN
-> Termux:Boot
-> runit
-> 常駐サービス
-> ローカルおよびパブリックヘルスチェック
これは一般的なLinuxサーバーではありません。systemdもなく、通常のDockerデーモンもなく、そのように見せかける理由もありません。しかし、それは非常に有能なユーザーランドがその上に載っているLinuxカーネルであり、それが十分であることが判明しました。
2番目に悪い考え:proot
私のアプリケーションのほとんどは、すでにLinux ARM64 OCIイメージとして出荷されていました。proot-distroは、アプリケーション自体を変更することなく、Debian上でそれらを驚くほど簡単に実行できるようにしました。
PRootはファイルシステムとプロセスの操作をユーザー空間でインターセプトし、通常のTermuxプロセスにDebianルートファイルシステム内にいるかのように信じ込ませます。これはコンテナ境界ではありません。すべては依然としてAndroidのカーネル、ネットワーク名前空間、およびTermux UIDを共有します。しかし、アプリケーション互換性レイヤーとしては、ルート権限も特別なカーネルも必要としないため、非常に有用です。
通常のWebサービスは、当初はこの方法で正常に動作していました。私の各アプリケーションは、検証済みのルートファイルシステム、ループバックポート、およびrunitサービスを取得しました。CaddyはTermuxで直接実行され、ホスト名をそれらのポートにルーティングしました。
パフォーマンス/レイテンシに敏感なSurfブラウザのワークロードは例外でした。プロセスの起動、ライブラリのオープン、パスのウォーク、ブラウザプロファイルの読み込み、キャプチャデータのシャッフルなど、すべてがPRootのユーザー空間翻訳レイヤーを通過しました。CPUは利用可能でしたが、Chromeは効率的にそれに到達できませんでした。そこで、私は電話をルート化しました。Androidを置き換えるためではなく、同じDebianファイルシステムを適切にマウントし、実際のchrootでそこに入るためです。
Runitは依然としてTermuxからライフサイクルを管理し、設定は同じ場所から来て、アプリケーションデータは依然としてTermuxストレージにありました。ワークロードは、PRoot経由ではなく、ネイティブsyscallを介してAndroidカーネルに到達するようになりました。改善は微々たるものではありませんでした!
そのパスが安定した後、小さな常駐プログラムをPRootの下に残しておくことにはあまり意味がなくなりました。それらは今、同じ方法で実行されています。私のワークステーションは、各ARM64イメージを正確なダイジェストに解決し、そのファイルシステムをエクスポートします。Ansibleがそれを検証して電話にインストールします。小さなルートヘルパーがプライベートマウント名前空間を作成し、必要なパスをバインドし、chrootでファイルシステムに入り、権限を降格させて、元のイメージのエントリポイントを開始します。
Dockerもコンパイラも電話上に存在する必要はありません。これらは依然としてセキュリティ境界ではなく互換性環境です。常駐プログラムはAndroidのカーネルとネットワークスタックを共有しますが、プライベートマウント名前空間は主にマウントとクリーンアップを予測可能に保ちます。
また、DebianのグラフィックススタックをVirGLとAndroid Vulkan経由で電話のMali GPUにブリッジしようと、あまりにも長い時間を費やしました。ハードウェアコンポジットのチェックマークと、破損したページやさらに悪いパフォーマンスを得ました…退屈なソフトウェアレンダリングパスの方がパフォーマンスが良いことが判明しました。
インフラストラクチャ!シェル履歴の山ではない
この時点で、電話はすべてを実行できるようになりましたが、私は1週間で忘れてしまうようなコマンドから組み立てられたペットサーバーを望んでいませんでした。私はホスト全体をAnsible管理状態に移行しました。バージョン、サービス定義、ルート、電源設定、シークレット、ヘルスチェックはすべて1つのプライベートリポジトリにあります。
デプロイフローはほぼ次のようになります。
リリースまたはOCIイメージ
-> Gitでピン留めされたチェックサム/ダイジェスト
-> SSH経由のAnsible
-> 電話上のバージョン管理されたファイル
-> アトミックな現在のシンボリックリンク
-> runitサービス
-> ローカルヘルスチェック
-> パブリックエッジチェック
リリースはダイジェストまたはチェックサムによってピン留めされ、アトミックなcurrentシンボリックリンクの後ろにあるバージョン管理されたディレクトリにインストールされます。チェックサムまたはヘルスチェックの失敗はデプロイを停止し、ロールバックはピンを元に戻して再度適用することを意味します。アプリケーションデータはリリースとは別に保存されます。
小さな手動ブートストラップの後:3つのAndroidアプリをインストールし、電話をルート化し、Termuxにスーパーユーザーアクセスを許可し、SSHを承認すると、同じリポジトリが残りのすべてを管理します。私のワークステーションから、ホストを宣言された状態にするのは意図的にシンプルです。
make phone
make phone-status
make phone-edge-check
再度適用しても、変更されていないランタイムファイルは置き換えられず、正常な常駐プログラムは再起動されません。さらに重要なのは、この電話が故障した場合でも、この設定は役立つということです。別のルート化可能なARM64電話を、シェル履歴を再構築することなく、同じ状態に近づけることができます。
シークレットは電話のGitチェックアウトには保存されません。Gitチェックアウトがないためです。Ansible Vaultの値は、インフラストラクチャリポジトリ内で暗号化されたまま保存されます。Vaultパスワードは、1Password SSHエージェントに固定チャレンジに署名するように要求することで派生されるため、秘密鍵は1Passwordに残され、電話がそれにアクセスする必要はありません。デプロイ中、Ansibleは各サービスが必要とするランタイム値のみをTermuxのプライベートストレージにレンダリングします。
ホームインターネットの背後にある電話へのトラフィックをルーティングする
次に解決すべき問題は、インバウンドトラフィックでした。私のホーム接続には、VPSが提供するような静的なサーバー設定はありません。また、ルーター経由でSSHやランダムなアプリケーションポートのコレクションを公開したくありませんでした。また、電話を電話として機能させたいという重要な意味合いもありました。つまり、電話のプラグを抜き、どこかに持ち運び、インターネットに接続しても、私のサーバーはそこにあるべきです。
HTTPアプリケーションはCloudflare Tunnelを使用します。Cloudflaredは電話から1つのアウトバウンド接続を作成し、Cloudflareは各ホスト名をそれ経由で送信し、Caddyはリクエストを正しいループバックサービスにルーティングします。
インターネット
-> Cloudflare Tunnel
-> 127.0.0.1上のCaddy
-> 127.0.0.1上のアプリケーション
これらのサービスに対するインバウンドルーター規則はありません。Cloudflaredはアウトバウンド接続のみを必要とするため、電話を別のネットワークに移動しても、トンネルは再接続され、ホスト名はそれに追従します。Tailscaleも管理のために同様のことを行います。電話のバッテリーは移動中のブリッジとして機能でき、パブリックサービスはどのWi-Fiがその下にぶら下がっていても気にしません。
しかし、Surfリモートブラウザのバックエンドは異なるパスを必要としました。その直接接続はレイテンシに敏感で、独自のTLSを終端し、古いiPadがそれに接続する際にサーバーのIDをピン留めします。自宅では、Cloudflare DDNSが現在のパブリックアドレスを指すDNSのみのレコードを維持し、ルーターがSurfに1つのポートを転送します。LAN上では、iPadは電話に直接接続します。
それでもローミングが残っていました。通常のCloudflare TunnelはCloudflareでTLSを終端しますが、これはSurfのピン留めされた接続が望まないものです。解決策は、完全なSurf TLSストリームを通常のWebSocket内にラップすることでした。CloudflareはWebSocketを認識して転送しますが、実際の認証済みSurf接続は、その内部でエンドツーエンドで暗号化されたままです。
これは明らかにレイテンシを追加します。自宅の外からは通常、さらに1つのネットワークラウンドトリップが見られ、iPad接続は最初にテストしたときに約60msでした。しかし、アウトバウンド接続のみを必要とするトンネルを介して、2012年のオペレーティングシステム上で、iPadにTailscaleをインストールすることなく機能します。
それが、電話の設定が最高の方法で少しばかげたものになった瞬間でした。私はそれを自宅に接続したままにし、オフィスに行き、MacBookからTailscale経由でワークステーションと電話にSSH接続し、元のiPadを電話ホストのSurfインスタンス経由で使用しました。VPSはもうなくなり、解放された気分でした。
何が実際に実行されているか
マシンには2つのレイヤーがあります。AndroidとTermuxはハードウェア、ネットワーキング、インバウンド、および監視を所有します。Linux常駐プログラムは期待するファイルシステムを取得し、それ以外はホストの邪魔になりません。
| レイヤー | 責任 | コンポーネント |
|---|---|---|
| Android / Termux ホスト | ハードウェア、ネットワーキング、インバウンド、監視 | runit、Tailscale、Caddy、Cloudflared、DDNS、オペレーションダッシュボード |
| ルート化されたLinux常駐プログラム | アプリケーション互換性とワークロード | SurfとChrome、Finances、Screen Share、その他のいくつかのアプリ |
要求の厳しいワークロードはSurfで、これは古いiPhoneやiPadに最新のChromiumブラウザをもたらします。電話は、Debianランタイム内でデスクトップChrome(Chromeの最近のarm64リリース)とSurfバックエンドを実行し、iPad miniはH.264ビデオとオーディオを受信しながら、タッチ、キーボード、タブ、ナビゲーションコマンドを送信します。Surfは、私が最初からシステムコールオーバーヘッドとレイテンシにこれほどこだわった理由です。
それに加えて、電話は私の個人財務トラッカーをホストしています。これは、定期的な収入と支出、単発の取引、月ごとの支出限度を記録し、残高を日ごとに予測します。置き換え可能なアプリケーションアーティファクトとは異なり、そのSQLiteデータベースには私が気にかけている状態が含まれているため、デバイス外への自動バックアップとテスト済みの復元パスがあります。
これらの名前のどれも、壮大な「電話サーバーフレームワーク」に組み込まれているわけではありません。新しい常駐プログラムは、別の不変アーティファクト、runit定義、明示的なデータ契約、ヘルスチェック、そしてオプションでCaddyルートです。
最新の追加はオブザーバビリティです。私はまだSSHで接続し、runitを検査し、ログをテールし、パブリックルートを確認し、Androidに直接クエリできますが、マシンで何が起こっているかを一目で見るためだけにそれを行う必要はなくなりました。ネイティブサービスが、8コアすべてのCPU使用率、メモリ、ストレージ、稼働時間、バッテリー、サーマル、ローカルおよびパブリックの到達可能性、そして検出されたすべてのrunit常駐プログラムを収集します。これは境界付きの履歴を保持し、LANまたはテイルネットからのみアクセス可能なhttps://dash.cmfで埋め込みVueインターフェースを提供します。
[画像: dashboard]
ログビューは実行時に同じサービスディレクトリを検出するため、別の常駐プログラムを追加してもUIにその名前を教える必要はありません。ノイズの多いものを覚えておくためだけにSSHでログインするよりもはるかに優れています。
これをすべきか?
もしあなたがすでに、比較的モダンでルート化可能なARM64電話を未使用で持っているなら、これは思っているよりもばかげていません。静かなハードウェア、低消費電力、フラッシュストレージ、Wi-Fi、リカバリ用の内蔵ディスプレイ、そして小さなUPSのように機能するバッテリーが得られます。ストックのAndroidはすでにハードウェアをサポートしており、Termuxとルート化されたchrootは、驚くほど多くの通常のLinuxソフトウェアを実行するのに十分です。
自動化されたデバイス外バックアップなしで、取り替えられないデータをそこに置くことはしないでしょうし、chrootを敵対的なワークロード分離とは見なさないでしょう。ルート化は信頼境界を拡大し、Androidは依然として珍しいサーバーホストであり、ソフトウェアレンダリングされたデスクトップChromeはGPUを備えた専用ワークステーションに勝るものではありません。
しかし、少数の個人サービスにとっては、特に代替手段が遅いか、煩わしいほど高価なVPSに無期限に支払い続けることである場合、これは単なるスタントではなく、真に有用な選択肢です。
電話は依然として奇妙なサーバーです。それは単一のカーネルを共有し、Androidは時々「最適化」しないように思い出させる必要があります。そして、将来のAndroidアップデートが新しい驚きを生み出す可能性は常にあります。
しかし、それは静かで、バッテリーバックアップがあり、十分に速く、どこからでも到達可能で、Gitから再現可能で、すでに私の家にあります。私はVPSの費用を節約しようとしてこれを始めました。結果として、私の個人インフラを実行するルート化された電話を手に入れ、そしてなぜかそれがはるかに満足のいくものになりました。:)
追記: この投稿はHacker Newsで議論されました。真のHNスタイルで、会話の驚くべき部分はタイトルのことになりました。偶然の言語学スレッドを楽しみました。:)