HN 日本語サマリー

← 一覧へ戻る
インフラ・DevOps

時にはネットワークの問題である:ある戦いの物語

Sometimes it is the network: a war story (utcc.utoronto.ca)

5 pointsby srijan40 コメント

要約

この記事は、バックアップパフォーマンスの低下という謎のトラブルシューティングの経験談です。当初はNFSの問題と疑われましたが、最終的には古い1Gbpsスイッチが原因でネットワーク帯域幅が飽和していたことが判明しました。この経験から、問題解決における体系的なアプローチの重要性が語られています。

全文翻訳

ツールが汎用すぎるUser-Agentを使用している

この記事を読んでいるということは、おそらく私のブログ(Wandering Thoughts)またはそれが属するWikiであるCSpaceの一部にアクセスしようとしたのでしょう。残念ながら、あなたが使用しているツールは、HTTP User-Agentヘッダーの値が過度に一般的であるか、そうでなければ非常に疑わしいものです。残念ながら、2025年初頭から、LLMトレーニングのためのデータ収集などが原因と思われる、このような挙動をする高トラフィックのクローラーが蔓延しています。私のブログ(Wandering Thoughts)への負荷を軽減するため、それらをすべてブロックしようと実験していますが、あなたはそれに引っかかってしまったのです。

すべてのHTTP User-Agentヘッダーは、それが何であるかを明確に識別すべきであり、ブラウザ以外のUser-Agentの場合は、関与しているソフトウェアだけでなく、誰がそのソフトウェアを使用しているかを特定する必要があります。例えば、Go-http-client/1.1 のような極端に一般的な値は、もはや許容できるものではありません。

特に、HTTP User-Agentヘッダーに、それが示唆するものと「互換性がある」だけであるという明確なマーカーが含まれている場合、あなたの活動やソフトウェアを説明する実際のURLを明示的に含める必要があります。Mozilla/5.0 (compatible; mysoftware) のような最小限のHTTP User-Agentは許容されません。HTTP User-Agentが、あなたが何らかの「ボット」であることを示している場合も同様です。あなたのボットは、自身を説明する動作するURLを必要とします。どちらの場合も、メールアドレスでは不十分です。

Chris Siebenmann, 2026-04-18