HTTP/2 Zero-Day Vulnerability：Cloudflare 緩解了破紀錄的新型DDoS攻擊

　　從 2023 年 8 月 25 日開始，我們開始注意到一些異常的 HTTP 攻擊行為，並攻擊了很多我們的用戶。 但這些攻擊行為都被我們的自動化 DDoS 系統發現並阻擋了下來。 然而，沒過多久，它們的規模就突破了既有的DDoS紀錄，達到每秒為 201 million 請求的峰值， 這相當於我們之前有記錄以來最大攻擊規模的三倍。

　　而更加深入後發現，攻擊者能夠利用僅由 20,000 台機器組成的Botnet發起此類攻擊， 而如今的Botnet規模可達數十萬或數百萬台機器。整個web網路通常每秒處理 10-30 億個請求，因此使用此方法可以將整個web網路的請求數量等級集中在少數目標上，而其實是可以達成的。

　　這是一種規模空前的新型攻擊手段，這種攻擊是通過濫用 HTTP/2 協議的某些功能和服務器實現的(有關詳細信息，請參閱 CVE-2023-44487) 。 由於該攻擊利用了 HTTP/2 協議中的潛在弱點，因此我們相信任何使用了 HTTP/2 的供應商都將受到攻擊。我們建議，最好的防禦措施是在任何 Web 或 API 服務器前面使用 Cloudflare DDoS 緩解服務。

　　Rapid Reset 導致DDoS攻擊產生

　　HTTP/2 request cancellation 可被濫用來reset無限數量的Streams。當 HTTP/2 服務器能夠快速地處理客戶端發送的 RST_STREAM frames並解除狀態時，這種rapid resets不會導致問題。 但是出現任何延遲或滯後時，問題就會開始出現。 客戶端可能會處理大量請求，導致工作積累積到一個上限，從而導致服務器附載過重。常見的 HTTP 部署架構是在其他組件之前運行 HTTP/2 Proxy或負載平衡器。當客戶端請求到達時，它會被快速分流， 然而這種架構更有可能遇到rapid resets帶來的問題。

　　舉例：當Reverse Proxy處理送入的 HTTP/2 客戶端流量時，它們會將數據從connection’s socket按照順序接的複製到緩衝區中，並依序處理緩衝的數據。 當讀取每個請求(HEADERS and DATA frames)時，它被分派到upstream service。當讀取 RST_STREAM frames時，請求的本地狀態將被解除，並通知upstream service請求已被取消，持續的重復，直到消耗整個緩衝區。 然而這樣的邏輯就有可能會被濫用：當惡意客戶端開始發送大量請求並在connection開始時重置時，服務器會快速地讀取所有請求，並對upstream service造成壓力，導致無法處理任何新的連線請求。

　　此次事件對於使用Cloudflare的客戶影響

　　如上所述，當請求被取消時，upstream service會收到通知，並可以在浪費太多資源之前中止請求。 大多數惡意請求從未轉發到源服務器，然而這些攻擊的規模確實造成了一些影響。

　　首先，隨著收到請求的速率達到前所未有的峰值，我們收到了客戶發現的 502 錯誤數量增加的報告。 這種情況發生在我們受影響最嚴重的數據中心，因為個數據中心正在努力處理所有請求。攻擊者利用單一筆connection發送大量的的request，且每一筆都必須轉發到"business logic" proxy。隨著請求流量變得高於我們的proxy capacity，連接這兩個服務的管道在我們的一些服務器中達到了飽和狀態。發生這種情況時，TLS proxy無法再連接到其upstream service，這就是為什麼某些客戶端在最嚴重的攻擊期間看到「502 Bad Gateway」錯誤的原因。 由於我們即時的觀察及快速的緩解措施大大減少了這些攻擊的規模，今天這個數字實際上為零。

　　Cloudflare措施和建議

　　2019 年，我們發現了多個與 HTTP/2 實現相關的 DoS 漏洞。 Cloudflare 開發並部署了一系列檢測和緩解措施作為響應。 CVE-2023-44487是HTTP/2漏洞的另一種表現形式。除了直接修復之外，我們還對服務器的 HTTP/2 frames處理和請求分派代碼進行了多項改進。 Cloudflare 已經擁有適當的系統，可以通過更有效的方法緩解非常大的攻擊。 其中之一被命名為「IP Jail」。 對於超容量攻擊，該系統會收集參與攻擊的客戶端 IP，並阻止它們連接到受攻擊的標的物(無論是在 IP layer還是在我們的 TLS proxy中)。 然而該系統需要幾秒鐘才能完全生效; 由於這種新的僵屍網絡實際上沒有啓動期，因此我們需要能夠在攻擊成為問題之前將其消滅。為了實現這一目標，我們擴展了 IP Jail 系統來保護我們的整個基礎設施：一旦 IP 被「jailed」，不僅會阻止它連接到受攻擊的標的物，我們還會禁止相應的 IP 使用 HTTP/2 訪問任何其他域 在 Cloudflare 上使用了一段時間。由於所有這些操作都發生在 HTTPS 開始處的 TLS proxy中，因此與一般的 L7 緩解系統相比，這可以節省大量資源。 這使我們能夠更順利地抵御這些攻擊。

　　結論

　　雖然這是最新的破紀錄攻擊，但我們知道這不會是最後一次。 隨著攻擊變得越來越複雜，Cloudflare 不斷努力主動識別新威脅 - 為我們的全球網絡部署對策，以便我們數百萬的客戶立即得到自動保護。自 2017 年以來，Cloudflare 一直為我們的所有客戶提供免費、不計量且無限制的 DDoS 保護。此外，我們還提供一系列附加安全功能，以滿足各種規模組織的需求。如果您不確定自己是否受到保護或想瞭解如何受到保護，請聯繫我們。