HN 日本語サマリー

← 一覧へ戻る
インフラ・DevOps

GitHub.comでのインシデント

Incident with Github.com (githubstatus.com)

484 pointsby kevcampb393 コメント

要約

GitHub.comでインシデントが発生し、WebエクスペリエンスやAPIトラフィックで約20%のエラー率、アーカイブダウンロードで約50%のエラー率が見られました。SAML、OIDC認証、SCIM、Team Syncも影響を受け、原因究明が進められました。

全文翻訳

GitHub.comでのインシデント

インシデントレポート(GitHub)

解決済み

2026年8月17日 13:28~21:15 UTC(7時間47分)、GitHub.comではIssues、Pull Requests、API、Actions、Copilot全体でエラー率とレイテンシの増加が発生しました。ピーク時には、Web/APIのエラー率は約20%、アーカイブおよび生コンテンツのダウンロードは約50%に達しました。SAML/OIDC認証、SCIM、Team Syncも影響を受け、また、GitHub.comでホストされている公開ワークフロー定義に依存するGHECのActionsワークフローも影響を受けました。Central USデータセンターが復旧した16:36 UTCまでにほとんどのサービスが回復しましたが、Actionsは約18:03 UTCまで、Copilot Token Serviceは21:02まで完全に回復しませんでした。

障害のあるトラフィックの一部はCentral USからNorthern Virginiaに移動され、そこで正常に処理されましたが、Central USのネットワーク障害のデバッグと解決には時間がかかりました。単一の内部エンドポイントへの応答遅延が、VS Codeの潜在的なリトライバグをトリガーし、トラフィックを約10倍に増幅させ、Copilot Token Serviceの復旧を遅延させました。

障害の直接的な原因は、新しいトラフィックピークによるCentral USのロードバランサーにおけるネットワーク輻輳でした。当初、これはIstioサイドカーポッドがコンカレンシー制限に達し、ホストサービスのみを監視しサイドカー制限を監視しない誤設定されたポリシーのためにオートスケールが正しく行われなかったことに起因しました。一つの障害が連鎖的に発生し、最終的に4つのHAProxyノードがフロー制限を使い果たし、ゲートウェイ認証パスを低下させ、広範な認証レイテンシと障害を引き起こしました。この問題は、楽観的なリトライロジックによって悪化し、内部ロードバランサーを過負荷にしました。これらのノードでHAProxyを一時停止すると、即座に広範な回復が見られました。

Northern VAでのリトライストームは、1) PRによるゲートウェイリトライロジックの一時的な削減、および2) ロードバランサーでのCopilot Token Serviceトークンリクエストの403エラーによるブロック、そしてサイトごとにトラフィックを段階的に増加させることで修正されました。

クライアントのリトライ動作が負荷を増幅させたため、残りのCopilot認証障害が継続しました。失敗したトークン操作は、多くの追加リクエストを生成し、リトライループに入る可能性がありました。Copilot Token Serviceのトラフィックは、通常の7~9K RPSから70~100K RPSに増加しました。ゲートウェイ認証リトライの削減とリトライをトリガーする応答のブロックにより、Copilot Token Serviceは安定し、回復が完了しました。

復旧を妨げた要因には、codeloadエンドポイントに対する多数のスクレイピング攻撃が含まれていました。

再発防止のため、以下のフォローアップアクションを実施します。

  • サービスメッシュサイドカーのコンカレンシーと容量を考慮したオートスケーリングポリシーの修正。
  • 影響を受けたサービス全体でのIstioリクエスト、コンカレンシー、スケーリング制限の監査。
  • ゲートウェイとクライアント全体のリトライ制限とバックオフ動作の見直し。
  • Copilotトークン・トラフィックを増幅させたVS Codeのリトライ動作への対応。
  • ロードバランサーの容量監視とリージョナルフェイルオーバー保護の改善。

投稿日: 2026年8月17日 - 21:15 UTC

更新

一部のアプリケーションで発生しているCopilot認証の断続的な障害に対処するため、緩和策を引き続き適用しています。今後30分以内に完全な回復を見込んでいます。GitHub CLIおよびGitHub App経由のCopilot利用は影響を受けていません。

投稿日: 2026年8月17日 - 20:45 UTC

更新

Issuesは正常に稼働しています。

投稿日: 2026年8月17日 - 20:22 UTC

更新

一部のアプリケーションでCopilot認証に影響を与える断続的な障害について、引き続き調査中です。GitHub CLIおよびGitHub App経由のCopilot利用は影響を受けていません。

投稿日: 2026年8月17日 - 20:08 UTC

更新

断続的な認証障害について、引き続き調査中です。認証トークンのリトライを部分的に無効化し、改善が見られましたが、この緩和策を完全に適用する前に影響を監視しています。

投稿日: 2026年8月17日 - 19:13 UTC

更新

APIリクエストは正常に稼働しています。

投稿日: 2026年8月17日 - 19:01 UTC

更新

APIリクエストで利用可能な状態の低下が発生しています。引き続き調査中です。

投稿日: 2026年8月17日 - 18:48 UTC

更新

Git Operationsに影響していた低下は緩和されました。安定性を監視しています。

投稿日: 2026年8月17日 - 18:23 UTC

更新

問題のあるコンポーネントを特定し、是正措置を講じましたが、断続的な認証障害という形で残存する影響が見られます。追加の緩和策を適用し、残りの影響を調査中です。

投稿日: 2026年8月17日 - 18:11 UTC

更新

Issuesでパフォーマンスの低下が発生しています。引き続き調査中です。

投稿日: 2026年8月17日 - 17:36 UTC

更新

問題のあるコンポーネントを特定し、是正措置を講じましたが、多数のサービスにわたって残存する影響が見られます。追加の緩和策を適用し、残りの影響を調査中です。

投稿日: 2026年8月17日 - 17:34 UTC

更新

Git Operationsでパフォーマンスの低下が発生しています。引き続き調査中です。

投稿日: 2026年8月17日 - 17:30 UTC

更新

API Requests、Actions、Git Operations、Issues、Pages、Pull Requests、Webhooksに影響していた低下は緩和されました。安定性を監視しています。

投稿日: 2026年8月17日 - 16:59 UTC

更新

問題のあるコンポーネントを特定し、是正措置を講じました。回復の兆候は強く見られますが、エラー率が依然としてわずかに高い状態にあるため、サービスを完全に復旧させるために作業を続けています。回復が進むにつれて、さらにアップデートを投稿します。

投稿日: 2026年8月17日 - 16:36 UTC

更新

WebエクスペリエンスとAPIトラフィックで約20%のエラー率が発生しています。アーカイブダウンロードとリポジトリの生コンテンツダウンロードでは約50%のエラー率が発生しています。SAMLおよびOIDC認証、SCIM、Team Syncも影響を受けています。根本原因の特定を進めており、さらに情報が得られ次第、アップデートを投稿します。

投稿日: 2026年8月17日 - 16:16 UTC

更新

WebエクスペリエンスとAPIトラフィックで約20%のエラー率が発生しています。アーカイブダウンロードとリポジトリの生コンテンツダウンロードでは約50%のエラー率が発生しています。SAMLおよびOIDC認証、SCIM、Team Syncも影響を受けています。現在、緩和策を実施しており、進捗に応じてアップデートを投稿します。

投稿日: 2026年8月17日 - 15:42 UTC

更新

Webhooksでパフォーマンスの低下が発生しています。引き続き調査中です。

投稿日: 2026年8月17日 - 15:40 UTC

更新

Git Operationsでパフォーマンスの低下が発生しています。引き続き調査中です。

投稿日: 2026年8月17日 - 15:21 UTC

更新

Pagesでパフォーマンスの低下が発生しています。引き続き調査中です。

投稿日: 2026年8月17日 - 15:10 UTC

更新

API Requestsで利用可能な状態の低下が発生しています。引き続き調査中です。

投稿日: 2026年8月17日 - 15:01 UTC

更新

Webhooksで利用可能な状態の低下が発生しています。引き続き調査中です。

投稿日: 2026年8月17日 - 14:58 UTC

更新

WebエクスペリエンスとAPIトラフィックで約20%のエラー率が発生しています。アーカイブダウンロードとリポジトリの生コンテンツダウンロードでは約50%のエラー率が発生しています。SAMLおよびOIDC認証、SCIM、Team Syncも影響を受けています。現在、これまでの調査に基づいた緩和策を実施しており、改善を監視しています。

投稿日: 2026年8月17日 - 14:58 UTC

更新

Actionsで利用可能な状態の低下が発生しています。引き続き調査中です。

投稿日: 2026年8月17日 - 14:58 UTC

更新

Pull Requestsで利用可能な状態の低下が発生しています。引き続き調査中です。

投稿日: 2026年8月17日 - 14:54 UTC

更新

Issuesで利用可能な状態の低下が発生しています。引き続き調査中です。

投稿日: 2026年8月17日 - 14:49 UTC

更新

Pull Requestsでパフォーマンスの低下が発生しています。引き続き調査中です。

投稿日: 2026年8月17日 - 14:45 UTC

更新

Copilotで利用可能な状態の低下が発生しています。引き続き調査中です。

投稿日: 2026年8月17日 - 14:31 UTC

更新

WebエクスペリエンスとAPIトラフィックで約20%のエラー率が発生しています。アーカイブダウンロードとリポジトリの生コンテンツダウンロードでは約50%のエラー率が発生しています。SAMLおよびOIDC認証、SCIM、Team Syncも影響を受けています。調査は進行中であり、さらに情報が得られ次第、アップデートを提供します。

投稿日: 2026年8月17日 - 14:24 UTC

更新

WebエクスペリエンスとAPIトラフィックで約20%のエラー率が発生しています。アーカイブダウンロードとリポジトリの生コンテンツダウンロードでは約50%のエラー率が発生しています。根本原因の調査は進行中であり、調査が進むにつれてアップデートを提供します。

投稿日: 2026年8月17日 - 14:04 UTC

更新

Pull Requestsでパフォーマンスの低下が発生しています。引き続き調査中です。

投稿日: 2026年8月17日 - 13:58 UTC

更新

Issuesでパフォーマンスの低下が発生しています。引き続き調査中です。

投稿日: 2026年8月17日 - 13:46 UTC

更新

Pull Requests、Issuesなど、多数のエクスペリエンスで約20%のエラー率が発生しています。現在調査中で、利用可能になり次第アップデートを投稿します。

投稿日: 2026年8月17日 - 13:45 UTC

更新

Webhooksでパフォーマンスの低下が発生しています。引き続き調査中です。

投稿日: 2026年8月17日 - 13:44 UTC

更新

Actionsでパフォーマンスの低下が発生しています。引き続き調査中です。

投稿日: 2026年8月17日 - 13:42 UTC

更新

API Requestsでパフォーマンスの低下が発生しています。引き続き調査中です。

投稿日: 2026年8月17日 - 13:41 UTC

調査中

一部のGitHubサービスでパフォーマンスが低下しているとの報告について調査中です。

投稿日: 2026年8月17日 - 13:40 UTC

このインシデントは以下に影響しました: Git Operations、Webhooks、API Requests、Issues、Pull Requests、Actions、Pages、およびCopilot。

← 現在のステータス Atlassian Statuspage提供

[画像: GitHub footer]

開発者向けニュースレターを購読する

ヒント、技術ガイド、ベストプラクティスを入手できます。月2回、受信トレイに直接お届けします。

購読

インシデントの購読

×

GitHub.comでのインシデントのアップデートをメールおよび/またはSMSで購読できます。インシデントが更新された際にメール通知、GitHubがインシデントを作成または解決した際にSMS通知を受け取ります。

メール経由:

SMS経由:

アフガニスタン (+93) アルバニア (+355) アルジェリア (+213) アメリカ領サモア (+1) アンドラ (+376) アンゴラ (+244) アンギラ (+1) アンティグア・バーブーダ (+1) アルゼンチン (+54) アルメニア (+374) アルバ (+297) オーストラリア/ココス/クリスマス島 (+61) オーストリア (+43) アゼルバイジャン (+994) バハマ (+1) バーレーン (+973) バングラデシュ (+880) バルバドス (+1) ベラルーシ (+375) ベルギー (+32) ベリーズ (+501) ベナン (+229) バミューダ (+1) ボリビア (+591) ボスニア・ヘルツェゴビナ (+387) ボツワナ (+267) ブラジル (+55) ブルネイ (+673) ブルガリア (+359) ブルキナファソ (+226) ブルンジ (+257) カンボジア (+855) カメルーン (+237) カナダ (+1) カーボベルデ (+238) ケイマン諸島 (+1) 中央アフリカ (+236) チャド (+235) チリ (+56) 中国 (+86) コロンビア (+57) コモロ (+269) コンゴ (+242) コンゴ民主共和国 (+243) コスタリカ (+506) クロアチア (+385) キプロス (+357) チェコ共和国 (+420) デンマーク (+45) ジブチ (+253) ドミニカ (+1) ドミニカ共和国 (+1) エジプト (+20) エルサルバドル (+503) 赤道ギニア (+240) エストニア (+372) エチオピア (+251) フェロー諸島 (+298) フィジー (+679) フィンランド/アランド諸島 (+358) フランス (+33) フランス領ギアナ (+594) フランス領ポリネシア (+689) ガボン (+241) ガンビア (+220) ジョージア (+995) ドイツ (+49) ガーナ (+233) ジブラルタル (+350) ギリシャ (+30) グリーンランド (+299) グレナダ (+1) グアドループ (+590) グアム (+1) グアテマラ (+502) ギニア (+224) ガイアナ (+592) ハイチ (+509) ホンジュラス (+504) 香港 (+852) ハンガリー (+36) アイスランド (+354) インド (+91) インドネシア (+62) イラク (+964) アイルランド (+353) イスラエル (+972) イタリア (+39) ジャマイカ (+1) 日本 (+81) ヨルダン (+962) ケニア (+254) 韓国 (+82) コソボ (+383) クウェート (+965) キルギス (+996) ラオス (+856) ラトビア (+371) レバノン (+961) レソト (+266) リベリア (+231) リビア (+218) リヒテンシュタイン (+423) リトアニア (+370) ルクセンブルク (+352) マカオ (+853) マケドニア (+389) マダガスカル (+261) マラウイ (+265) マレーシア (+60) モルディブ (+960) マリ (+223) マルタ (+356) マルティニーク (+596) モーリタニア (+222) モーリシャス (+230) メキシコ (+52) モナコ (+377) モンゴル (+976) モンテネグロ (+382) モントセラート (+1) モロッコ/西サハラ (+212) モザンビーク (+258) ナミビア (+264) ネパール (+977) オランダ (+31) ニュージーランド (+64) ニカラグア (+505) ニジェール (+227) ナイジェリア (+234) ノルウェー (+47) オマーン (+968) パキスタン (+92) パレスチナ自治区 (+970) パナマ (+507) パラグアイ (+595) ペルー (+51) フィリピン (+63) ポーランド (+48) ポルトガル (+351) プエルトリコ (+1) カタール (+974) レユニオン/マヨット (+262) ルーマニア (+40) ロシア/カザフスタン (+7) ルワンダ (+250) サモア (+685) サンマリノ (+378) サウジアラビア (+966) セネガル (+221) セルビア (+381) セーシェル (+248) シエラレオネ (+232) シンガポール (+65) スロバキア (+421) スロベニア (+386) 南アフリカ (+27) スペイン (+34) スリランカ (+94) セントクリストファー・ネイビス (+1) セントルシア (+1) セントビンセント・グレナディーン諸島 (+1) スーダン (+249) スリナム (+597) エスワティニ (+268) スウェーデン (+46) スイス (+41) 台湾 (+886) タジキスタン (+992) タンザニア (+255) タイ (+66) トーゴ (+228) トンガ (+676) トリニダード・トバゴ (+1) チュニジア (+216) トルコ (+90) タークス・カイコス諸島 (+1) ウガンダ (+256) ウクライナ (+380) アラブ首長国連邦 (+971) 英国 (+44) 米国 (+1) ウルグアイ (+598) ウズベキスタン (+998) ベネズエラ (+58) ベトナム (+84) 英領バージン諸島 (+1) 米領バージン諸島 (+1) イエメン (+967) ザンビア (+260) ジンバブエ (+263)

電話番号を入力

番号を変更 OTPを送信

送信されたOTPを入力

OTPを再送信 30秒以内

SMSアップデートを受信するには、番号を確認してください。メールのみで続行するには「購読」をクリックしてください。

メッセージとデータ通信料が適用される場合があります。購読することにより、お客様は当社のプライバシーポリシー、Atlassianのサービス利用規約、およびAtlassianのプライバシーポリシーに同意したものとみなされます。このサイトはreCAPTCHAによって保護されており、Googleのプライバシーポリシーおよび利用規約が適用されます。