IPv6デリゲーションにおける、異常に微妙な障害モード
IPv6 delegation, an unusually subtle failure mode (savyasacheejha.com)
要約
筆者はカスタムルーターでIPv6アドレスの取得に問題が発生し、ISP接続を再起動するとGoogleへのIPv6接続ができなくなる現象に遭遇しました。調査の結果、これはルーターが古いIPv6プレフィックスを適切に無効化せず、クライアントデバイスが古いアドレスを使い続けることが原因だと判明しました。この問題を解決するため、筆者はOpenWrtのodhcpdデーモンを導入し、RFC 9096に準拠したIPv6プレフィックス管理を実現しました。
全文翻訳
IPv6デリゲーションにおける、異常に微妙な障害モード
カスタムx64ルーターを実行することには多くの利点があります。一つは、メインラインのLinuxが動作するため、迅速にアップデートが適用されることです。二つ目は、ルーターでの広告ブロックです。これだけで十分でしょう。そして三つ目は、何か問題が発生した場合、深く掘り下げて何が間違っているのかを突き止められることです。
今週、私のカスタムセットアップで非常に興味深い問題が発生しました。ISPに接続しているpppdを再起動すると、Googleが動作しなくなることに気づきました。名前解決はできていましたが、接続できませんでした。
[画像: パッチパネル、ポートに番号が振られ、一部には青と灰色のイーサネットケーブルが接続されている。]
Photo by Jordan Harrison on Unsplash
診断
私のスタックでは、networkdがネットワーク全般を担当し、pppdがISPにダイヤル接続し、kea-dhcp4がDHCPv4アドレスを配布し、blockyがDNS(ルーターおよびラップトップ上)を処理し、networkd自体がRA(ルーター広告)を処理しています。私の知る限り、このスタックには全く問題はありませんでした。デーモン自体はすべて実証済みで、正常に動作することが知られています。
では、これは私のラップトップの問題なのでしょうか?
~ ❯ ping -c 4 google.com
PING google.com (2404:6800:4013:813::64) 56 data bytes
--- google.com ping statistics ---
4 packets transmitted, 0 received, 100% packet loss, time 3064ms
~ ❯ ip addr
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
valid_lft forever preferred_lft forever
inet6 ::1/128 scope host noprefixroute
valid_lft forever preferred_lft forever
2: wlan0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc noqueue state UP group default qlen 1000
link/ether 00:00:5e:00:53:01 brd ff:ff:ff:ff:ff:ff
inet 192.168.2.148/24 brd 168.2.255 scope global dynamic noprefixroute wlan0
valid_lft 4130sec preferred_lft 4130sec
inet6 2001:db8:aaaa:1::10f1/64 scope global temporary dynamic
valid_lft 3090sec preferred_lft 1290sec
inet6 2001:db8:aaaa:1::1a03/64 scope global dynamic mngtmpaddr noprefixroute
valid_lft 3090sec preferred_lft 1290sec
inet6 2001:db8:bbbb:2::bea0/64 scope global temporary dynamic
valid_lft 3554sec preferred_lft 1754sec
inet6 2001:db8:bbbb:2::690f/64 scope global dynamic mngtmpaddr noprefixroute
valid_lft 3554sec preferred_lft 1754sec
inet6 fe80::5b9c/64 scope link noprefixroute
valid_lft forever preferred_lft forever
pingを実行すると、GoogleがIPv6アドレスに名前解決されていることがわかり、DNSは無罪であることが証明されましたが、pingできませんでした。一方、IPv4アドレスでは問題なく通信できました。
一方、wlan0には2つのIPv6アドレスのグループが表示され、古いIPv6アドレスには0より大きいpreferred lifetimeがありました。これが原因でしょうか? NetworkManagerを再起動したところ、驚くべきことにGoogleが再び動作するようになり、IPv6アドレスは新しいグループの1つだけになりました。
解決策
私はネットワークを深くデバッグした経験はありませんが、ここでの問題は比較的理解しやすいように思えました。pppdが再起動するたびに、ISPとの新しい接続がネゴシエートされ、ルーターに新しいプレフィックスが提供されます。しかし、どのデバイスも古いIPv6アドレスを削除しませんでした。最初はNetworkManagerのせいだと思いましたが、その後iPhoneも同じことをしているのを見ました。2つの点ではパターンになりませんが、線にはなります。それはnetworkdをまっすぐ指していました。
誤解しないでください。私はnetworkdが好きです。ラップトップにNetworkManagerをインストールしている唯一の理由は、Wi-Fiとローミングに特化しており、これまで一度も失敗したことがないからです(iwd最高!)。私のルーターとサーバーは両方ともnetworkdで動作しています。非常に快適で、無駄のないデーモンです。そのため、それを非難することには抵抗がありました。そこで、言い訳としてpppdに目を向けました。
NixOSルーターを再デプロイする際にpppdが再起動しないようにすることを決めました。しかし残念ながら、ISPがランダムに不調になりpppdが再接続して同じ問題が再び発生する状況もありました。これは、根本を突き止めなければならないことを意味しました。
少し検索したところ、RFC 9096(Customer EdgeルーターのIPv6再ナンバリングイベントへの対応改善)とRFC 7084(IPv6カスタマーエッジールーターの基本要件)にたどり着きました。基本的に、ルーターに新しいプレフィックスが与えられ、古いプレフィックスがアップストリームによってドロップされた場合、ルーターは古いプレフィックスをpreferred lifetimeとvalid lifetimeを0としてアドバタイズする必要があり、これによりルーター広告のコンシューマーはそれをソースアドレスとして使用しなくなります。
興味深いことに、networkdにはRFC 7084のnetworkdでのサポート(自動IPv6範囲デリゲーション)という問題があり、RFC 9096を適切に実装するための要件が2026年9月に出てきました。そこにはまだマージされていないパッチもあります。同じ問題がOPNsenseのradvdでも提起され、「計画なし」としてクローズされました。また、OPNsenseのdnsmasqでも同様の問題が提起されています。VyOSのダイナミックプレフィックスサポートは、まだオープンなリクエストです。これは、通常の候補は除外されたことを意味します。残された選択肢は一つしかなく、それはNixOSでは利用できません。OpenWrtのodhcpdです。これは実際にRFC 9096 コミットを実装しています。
OpenWrtのパッケージに依存することには少し躊躇がありました。OpenWrt自体に問題があるからではなく(むしろ逆です!)、そのディストリビューション自体がユニークだからです。systemdやdbusを使用せず、procdをpid1として使用し、IPCにはubusを使用しています。多くのパッケージがこれらのインフラストラクチャに依存していることは知っていますが、それが最初に確認したことです。幸いなことに、odhcpdはカーネルから直接netlink経由で情報を取得でき、ubusなしで設定できるという点でユニークです。そのため、それはブロックにはなりませんでした。パッケージ化には時間がかかりましたが、nixpkgsにレビューのために提出し、ルーターで実行を開始し、networkdのルーター広告を無効にしました。DHCPにもodhcpdを使用することもできましたが、kea-dhcp4にはかなり満足していたので、そのままにしておきました。
そして驚くべきことに、意図的にpppdを再起動したところ、以下のようになりました。
~ ❯ ip -6 addr show scope global
2: wlan0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 state UP
inet6 2001:db8:cccc:3::5286/64 scope global deprecated dynamic mngtmpaddr noprefixroute
valid_lft 5325sec preferred_lft 0sec
inet6 2001:db8:dddd:4::dcaa/64 scope global temporary dynamic
valid_lft 5338sec preferred_lft 2638sec
inet6 2001:db8:dddd:4::8a09/64 scope global dynamic mngtmpaddr noprefixroute
valid_lft 5338sec preferred_lft 2638sec
~ ❯ ip -6 route get 2606:4700:4700::1111
2606:4700:4700::1111 from :: via fe80::1 dev wlan0 proto ra src 2001:db8:dddd:4::dcaa metric 100 pref medium
~ ❯ ping -6 -c3 2606:4700:4700::1111
3 packets transmitted, 3 received, 0% packet loss, time 2003ms
rtt min/avg/max/mdev = 6.289/8.147/9.487/1.356 ms
成功!最も良かったのは、odhcpdのメモリは再起動後も永続し、マシンの時刻に依存しないことです。これは私にとって非常に重要です。なぜなら、ルーターの壊れたCMOSバッテリーを交換しておらず、ルーターを再起動するたびに時計がリセットされるからです。これにより、odhcpdは、それらがいつデリゲートされたかに関係なく、再起動後に正しいpreferred/valid lifetime 0で古いプレフィックスをアドバタイズできます。実際には、Wi-Fiアクセスポイントが稼働している間にルーターの電源が切れた場合や、ルーターを再起動した場合(これは間違いなく頻繁に起こります)に問題となります。家族のホームネットワークの稼働への依存を考えると、あらゆるケースをカバーしたいです。
私の高揚感は、iPhoneに接続したときに、古いアドレスが画面に残っているまで続きました。モバイルデータ通信をオフにして確認しました(Wi-Fiアシストと呼ばれるサービスで、iOSはWi-Fiが失敗するとサイレントにモバイルデータ通信にルーティングします)。同じ問題が数分間続き、その後アドレスが変更されて問題は自己解決しました。
パケットキャプチャを少し行うのに時間がかかりましたが、何が起こったのかが明らかになりました。プレフィックスが到着するとすぐにルーター広告が出されましたが、電話はスリープ状態であり、それを見逃しました。 awakeで手に持っていたときに次の広告を捉えました。これは、プレフィックスのドロップが迅速ではあるが、即時ではないことを示しています。私の電話が新しいプレフィックスを認識するのに約10分かかりました。networkdはそれぞれ30分/60分のlifetimeをアドバタイズしますが、radvdはデフォルトで4時間/24時間をアドバタイズします。odhcpdはRFC 9096の推奨事項に準拠し、45分/90分をアドバタイズします。
使用法と結論
odhcpdは、他のディストリビューションにデプロイされた場合、OpenWrtでの本来の動作とは若干異なります。ubus経由では更新できません(注:NixOSにはubusがパッケージ化されているため技術的には可能ですが、ここでは使用していませんでした)。そのため、起動時にインターフェイス名しか取得できず、ubusからではなくカーネルと通信して状態を取得します。NixOSモジュールは、起動時にそれらを取得できるように、デバイスユニットにバインドします。また、networkdの動作ともかなり異なります。例えば、networkdは設定をリロードするとrouter-lifetime-0のグッバイメッセージを送信しますが、odhcpdはそうしません(これは正しいです。odhcpdがダウンしてもルーターがダウンしたことを意味しないためです)。これにより、networkdがリロードされると、ネットワークに接続されているすべてのものが一時的にIPv6機能を失うという短いネットワークの中断が発生しました。そして最後に、pppdがダウンすると、odhcpdはルーターlifetimeを0とアドバタイズし、デフォルトルートがないことを示し、クライアントにゲートウェイとして使用しないように指示します。
私にとっての教訓は非常に単純でした。通常、可能な限りsystemdユーティリティを使用することを好みます。networkdを好み、個別のsyslogデーモンは使用せず、udevは私の友人だと感じています。しかし、それはマシンがクライアントとして機能する場合に当てはまります。マシンが別のマシンに対するサーバーとして動作するようになると、専門的なツールにフォールバックすることを好みます。したがって、私のルーターにはsystemd-timesyncdの代わりにchrony、systemd-resolvedの代わりにblocky、そしてsystemd-networkdのDHCPおよびルーター広告機能の代わりにkea-dhcp4と、そして現在はodhcpdが搭載されています。エッジケースが多すぎるため、専用のツールを使用する方が理にかなっています。
しかしそれ以上に、私はodhcpdを強く推奨します。kea-dhcp4をそれに置き換えるかどうかはわかりませんが、ルーター広告デーモンとしては、コンシューマーISPに接続するホームネットワークにとって、これまで見つけた中で最高のものです。