GitHub 承認 8 月 17 日事故：Copilot Token Service 流量暴增至 10 倍

GitHub 承認 8 月 17 日事故：Copilot Token Service 流量暴增至 10 倍。 事故範圍 GitHub.com 在 13:28–21:15 UTC 期間受影響，共 7 小時 47 分鐘；Issues、Pull Requests、API、Actions 與 Copilot 等服務的錯誤率一度約 20%，archive 與 raw-content 下載則約 50%。Andrea 表示，這次情況「很艱難」，不打算淡化事件。 由左至右延伸的橫幅插畫，描繪戴著黃色工程安全帽的藍色線條角色們，在複雜的灰色管線與機械裝置間進行檢修與操作。 根因與擴大效應 Central US 的負載平衡器因流量達到新高而網路壅塞。起因是 Istio 的 service-mesh sidecar pod 達到並行上限，而 autoscaling 設定只監看主服務、未納入 sidecar 容量，導致故障逐步擴大，最終 4 個 HAProxy 節點耗盡流量上限。延遲回應又觸發 Visual Studio Code 的 retry bug，使 Copilot Token Service 流量從平時 7–9K RPS 升至 70–100K RPS，約為 10 倍。 以藍色線條勾勒的卡通插畫，描繪一個充滿管線與機械的工廠場景，三隻戴著黃色工程帽的角色正在各司其職，左側角色站在梯子上修理管線，中間角色在輸送帶旁拿著筆與剪貼板記錄，右側角色則在轉動大型閥門。 後續行動 完整時間線與數據見 GitHub 的根因報告。GitHub 將： 修正納入 service-mesh sidecar 並行數與容量的 autoscaling 政策。 稽核受影響服務的 Istio request、並行數與 scaling 上限。 檢視各 gateway 與客戶端的 retry 上限及 backoff 行為。 修正 Visual Studio Code 放大 Copilot token 流量的 retry 行為。 改善負載平衡器容量監控與區域 failover 防護。 以淺灰色調為主、點綴藍色線條與黃色安全帽的插畫，描繪一處工業管線與機械維修場景。畫面左下方有一位戴著黃色安全帽的藍線條角色正手持檢測儀器操作；畫面中央是一座灰色的複雜機械裝置，頂端帶有燈泡與控制面板；畫面右上方則有另一位戴著黃色安全帽的角色坐在懸掛平台上，手持工具進行管線檢修。原文：https://easyvibecoding.app/curated/3036-github-acknowledges-copilot-token-service-traffic-surged-10x