今年 6 月 17 日下午，在線服務(wù)普遍中斷。在澳大利亞，它影響了該國(guó)三大銀行、國(guó)家郵政服務(wù)、國(guó)家儲(chǔ)備銀行和一家航空公司。距離澳大利亞更遠(yuǎn)的地方，停電影響了香港證券交易所和一些美國(guó)航空公司。受影響服務(wù)的點(diǎn)名似乎達(dá)到了大約 500 個(gè)服務(wù)。
這些問(wèn)題在澳大利亞?wèn)|部時(shí)間中午左右首次被發(fā)現(xiàn)，直到四小時(shí)后才完全恢復(fù)。問(wèn)題當(dāng)然是這500家受影響的企業(yè)有什么共同點(diǎn)？這不是蓄意攻擊的結(jié)果。但這與許多互聯(lián)網(wǎng)企業(yè)（無(wú)論大小）用來(lái)轉(zhuǎn)移此類攻擊的影響的措施有關(guān)。答案是他們都是 Akamai 的客戶，尤其是 Akamai 的 Prolexic DDoS 保護(hù)系統(tǒng)。Akamai 的事后回應(yīng)是：
“無(wú)意中超出了此特定服務(wù)使用的路由表值。結(jié)果是服務(wù)意外中斷。”
https://blogs.akamai.com/2021/06/akamai-provides-prolexic-ddos-service-impact-update-status-resolved.html
是的，互聯(lián)網(wǎng)仍在增長(zhǎng)，在 IPv4 網(wǎng)絡(luò)中，我們正在接近大約 100 萬(wàn)個(gè)路由條目，而在 IPv6 中，數(shù)量現(xiàn)在接近 150,000 個(gè)條目。交換單元以各種方式實(shí)現(xiàn)數(shù)據(jù)包決策結(jié)構(gòu)。有些使用三元內(nèi)容尋址存儲(chǔ)器 (TCAM)，有些使用定制的 ASIC。這里的共同目標(biāo)是基于對(duì)數(shù)據(jù)包的目標(biāo)地址與從大約 100 萬(wàn)個(gè)條目池中提取的路由條目的最佳匹配的查找來(lái)做出轉(zhuǎn)發(fā)決策。這個(gè)查找必須盡可能快。如果我正在構(gòu)建一個(gè)可以處理多個(gè) 100G 電路的數(shù)據(jù)包負(fù)載的非常高速的交換機(jī)，那么我可能希望我的設(shè)備每秒做出大約 100M 左右的切換決策。這意味著我需要設(shè)計(jì)一個(gè)決策系統(tǒng)，該系統(tǒng)可以在 100 萬(wàn)個(gè)條目的集合中執(zhí)行此查找，并且只需 10 納秒。這是一個(gè)非常具有挑戰(zhàn)性的目標(biāo)。相比之下，最快的可用內(nèi)存周期時(shí)間略低于 1 納秒。然而，事情并沒(méi)有那么簡(jiǎn)單。如果我正在構(gòu)建這樣的開(kāi)關(guān)元件，那么我需要對(duì)其進(jìn)行設(shè)計(jì)，使其能夠應(yīng)對(duì)從現(xiàn)在起 1、2 甚至 5 年內(nèi)我可以預(yù)期的峰值開(kāi)關(guān)負(fù)載。如果我弄錯(cuò)了并且沒(méi)有設(shè)計(jì)足夠的容量和速度，那么我的設(shè)備將提前報(bào)廢，這將給網(wǎng)絡(luò)運(yùn)營(yíng)商帶來(lái)更多成本。如果我過(guò)度設(shè)計(jì)，那么我將在最先進(jìn)的高速內(nèi)存上花費(fèi)太多，我的產(chǎn)品將比我的競(jìng)爭(zhēng)對(duì)手貴得多。每臺(tái)設(shè)備都是以這種設(shè)計(jì)權(quán)衡構(gòu)建的，這些設(shè)備的使用壽命取決于諸如互聯(lián)網(wǎng)未來(lái)增長(zhǎng)率之類的不確定因素。關(guān)鍵是我們的網(wǎng)絡(luò)使用這樣的設(shè)備，網(wǎng)絡(luò)運(yùn)營(yíng)商的作用是不斷升級(jí)他們的交換設(shè)備能力，以保持領(lǐng)先于這些需求。并且意味著有時(shí)它們會(huì)滑倒不可避免。Akamai 顯然也是如此。當(dāng)我們處于硅能力的最邊緣時(shí)，我們不能只是設(shè)計(jì)這個(gè)問(wèn)題。網(wǎng)絡(luò)運(yùn)營(yíng)商的作用是不斷升級(jí)他們的交換設(shè)備能力，以保持領(lǐng)先于這些需求。并且意味著有時(shí)它們會(huì)滑倒不可避免。
但這并不是 Akami 獨(dú)有的問(wèn)題。所有的網(wǎng)絡(luò)服務(wù)提供商都在追求一個(gè)相似的目標(biāo)，并且所有這些系統(tǒng)有時(shí)都可能會(huì)切換到過(guò)載狀態(tài)并出現(xiàn)服務(wù)中斷。這次特定中斷的值得注意的是，這次中斷影響了大量在線服務(wù)提供商。作為在線平臺(tái)的后端服務(wù)提供商的業(yè)務(wù)并不完全是一個(gè)人口稠密且多樣化的商業(yè)環(huán)境。事實(shí)上，提供此類服務(wù)的企業(yè)很少，如果其中任何一家出現(xiàn)運(yùn)營(yíng)中斷，那么影響將非常明顯。
事實(shí)證明，這并不是 2021 年 6 月的孤立事件。本月早些時(shí)候，我們看到一組熱門服務(wù)消失了一個(gè)小時(shí)或更長(zhǎng)時(shí)間。受影響的服務(wù)列表包括 Twitch、Pinterest、Reddit、Spotify、紐約時(shí)報(bào)和 BBC 等。所有這些服務(wù)有什么共同點(diǎn)？他們使用 Fastly。
ABC 關(guān)于Fastly停電的新聞報(bào)道
“由于有效的客戶配置更改于 6 月 8 日出現(xiàn)了一個(gè)未被發(fā)現(xiàn)的軟件錯(cuò)誤，我們經(jīng)歷了全球中斷。我們?cè)谝环昼妰?nèi)檢測(cè)到中斷，然后確定并隔離原因，并禁用配置。在 49 分鐘內(nèi)，我們 95% 的網(wǎng)絡(luò)正常運(yùn)行。這次中斷是廣泛而嚴(yán)重的，我們真的很抱歉對(duì)我們的客戶和依賴他們的每個(gè)人造成的影響。”
https://www.fastly.com/blog/summary-of-june-8-outage
同樣，這不是攻擊。它更像是一個(gè)定時(shí)炸彈，特定的客戶配置設(shè)置可能會(huì)觸發(fā)共享 CDN 平臺(tái)的故障。所需要做的就是讓客戶偶然發(fā)現(xiàn)該特定配置設(shè)置，系統(tǒng)就會(huì)失敗。
Fastly 建立在一個(gè)名為“Varnish”的配置管理平臺(tái)上。正如 Fastly 報(bào)道的那樣：
“Fastly 建立在 Varnish 之上，它允許高性能的內(nèi)容交付，包括能夠立即清除其全球網(wǎng)絡(luò)中的內(nèi)容。使用 Varnish 配置語(yǔ)言 (VCL)，Catch 可以自定義其 Fastly 配置，從而實(shí)現(xiàn)更智能的緩存。
“根據(jù)請(qǐng)求中的 cookie 等特定內(nèi)容設(shè)置緩存規(guī)則，我們通常只會(huì)考慮運(yùn)行我們自己的 Varnish 服務(wù)器。能夠在 CDN 層執(zhí)行此操作使我們的設(shè)置更加強(qiáng)大和簡(jiǎn)化。我們還能夠確保始終從 Fastly 提供某些文件格式，并且理論上永遠(yuǎn)不必多次訪問(wèn)我們的來(lái)源。
“Varnish 對(duì)我們來(lái)說(shuō)非常重要，因?yàn)槿绻覀兿雽?duì)緩存層進(jìn)行更改，我們可以控制 VCL。對(duì)于大多數(shù) CDN，您無(wú)法獲得那種靈活性，但使用 Fastly 可以獲得這種靈活性。”
https://www.fastly.com/customers/catch/
“Varnish 是專門為取代 Squid 而設(shè)計(jì)的，Squid 是一種客戶端代理，可以改編并用作 Web 加速器。它的主要設(shè)計(jì)目標(biāo)是提高內(nèi)容密集型動(dòng)態(tài)網(wǎng)站以及大量消耗 API 的可擴(kuò)展性和容量。此類站點(diǎn)在 Web 服務(wù)器上運(yùn)行，例如 Apache 或 Nginx，主要是源服務(wù)器。創(chuàng)建要提供的 Web 內(nèi)容。Varnish 的工作不是創(chuàng)建內(nèi)容，而是讓CDN閃電般快速。”
https://info.varnish-software.com/blog/history-varnish-cache-10-years
當(dāng)挪威在線報(bào)紙 VG Multimedia 每周的頁(yè)面瀏覽量超過(guò) 4500 萬(wàn)時(shí)，需要 12 臺(tái)服務(wù)器來(lái)處理這些請(qǐng)求。VG 的系統(tǒng)管理員 Anders Berg 認(rèn)為必須有一種方法可以減少服務(wù)器數(shù)量，同時(shí)加快頁(yè)面加載速度。他為一個(gè)處理這個(gè)問(wèn)題的開(kāi)源項(xiàng)目編寫(xiě)了一份規(guī)范，讓球滾動(dòng)起來(lái)。
https://www.varnish-software.com/varnish-history/
因此，F(xiàn)astly 的主要資產(chǎn)不是某些能夠獨(dú)特高效地執(zhí)行 CDN 功能的專有軟件系統(tǒng)。與許多其他工具一樣，Varnish 是一種開(kāi)源軟件工具。或許 Fastly 的特殊之處在于其龐大的客戶群，這些客戶可能使用 Fastly 來(lái)滿足他們的 CDN 需求，因?yàn)槠渌艘沧龀隽耸褂?Fastly 的相同決定。換句話說(shuō)，使 Fastly 在 CDN 世界中如此特別的原因在于它的規(guī)模，而這種規(guī)模可能是其他人選擇使用 Fastly 并為其進(jìn)一步增長(zhǎng)做出貢獻(xiàn)的更令人信服的原因之一。 規(guī)模會(huì)產(chǎn)生更大的規(guī)模。
CDN 市場(chǎng)存在一些問(wèn)題。
首先，雖然選擇一個(gè) CDN 提供商并將其用于整個(gè)在線內(nèi)容和服務(wù)組合非常容易，但選擇兩個(gè)或更多這樣的 CDN 提供商并將它們一起用于自我修復(fù)的互備份設(shè)置可能更具挑戰(zhàn)性. 對(duì)于許多在線服務(wù)企業(yè)來(lái)說(shuō)，這是一個(gè)“選擇一個(gè)CDN比做出明智的選擇更容易！” 從那時(shí)起，企業(yè)與 CDN 提供商共享命運(yùn)。
其次，可供選擇的 CDN 并不多。如果你追求全球足跡，有足夠的能力吸收除最極端的 DDOS 容量攻擊之外的所有攻擊，甚至吸收所有此類攻擊，那么功能性服務(wù)接口允許 CDN 優(yōu)化服務(wù)交付，同時(shí)讓客戶控制關(guān)鍵方面服務(wù)的安全性和完整性（例如私鑰），那么您的比較購(gòu)物清單并不是很大。Fastly 和 Akamai 與 Amazon CloudFront、google Cloud、微軟的 Azure、Cloudflare 和 Limelight 一起出現(xiàn)在大多數(shù)最受歡迎的 CDN 列表中。那是七。當(dāng)然還有更多，一些具有更多區(qū)域性，一些具有特定的技術(shù)專長(zhǎng)，但這七家企業(yè)是當(dāng)今 CDN 提供商世界的核心。
也許這才是真正的問(wèn)題。在CDN中，現(xiàn)在似乎每個(gè)人都以另一種形式使用 CDN，但實(shí)際上可供選擇的 CDN 很少。這是一個(gè)高度集中的空間，體積經(jīng)濟(jì)學(xué)占主導(dǎo)地位。較大的 CDN 提供商可以以較小的 CDN 企業(yè)無(wú)法實(shí)現(xiàn)的價(jià)格提供服務(wù)級(jí)別。這增加了他們的市場(chǎng)份額，這當(dāng)然增加了他們的規(guī)模并進(jìn)一步加劇了供應(yīng)商之間數(shù)量經(jīng)濟(jì)差異的規(guī)模。提供商空間在一小部分“核心”CDN 巨頭和一個(gè)更大的“光環(huán)”之間分叉，后者由更小的 CDN 提供商組成，這些提供商提供各種定制的方法來(lái)填補(bǔ)大型提供商的服務(wù)配置文件中留下的任何專業(yè)空白。大型供應(yīng)商有效地控制了小型供應(yīng)商的增長(zhǎng)前景，因?yàn)樗麄兛刂浦麄兊姆?wù)產(chǎn)品中留下的差距。自然的結(jié)果是大變大，小變小。必然的結(jié)果是，當(dāng)一個(gè)CDN服務(wù)提供商遇到服務(wù)中斷，而且這種中斷過(guò)去發(fā)生過(guò)，而且將來(lái)無(wú)疑還會(huì)發(fā)生時(shí)，那么中斷服務(wù)的傷亡名單就會(huì)非常大。
通常，此類中斷會(huì)削弱對(duì)服務(wù)提供的信心，客戶會(huì)尋找替代方案。結(jié)果很可能是公司的投資者會(huì)緊張，股價(jià)會(huì)下跌。一般。但這些 CDN 人似乎很“特別”。Fastly 的股價(jià)在整個(gè) 6 月份都在上漲，并且在股價(jià)方面沒(méi)有停電的殘余影響。
Fastly股價(jià) – 2021 年 6 月
而Akami的股價(jià)在6月18日之后大漲！
Akamai 股價(jià) – 2021 年 6 月
泡沫的特征通常是投資者的非理性繁榮，在這種情況下，要求分享尚未實(shí)現(xiàn)的未來(lái)賞金的喧囂完全淹沒(méi)了對(duì)市場(chǎng)基本面更為冷靜的評(píng)論，并且也忽略了關(guān)于成本和收入基礎(chǔ)的平凡對(duì)話。這也是高度中心化市場(chǎng)的問(wèn)題之一。在高度集中的市場(chǎng)中，完全主導(dǎo)其市場(chǎng)的成功企業(yè)所提供的回報(bào)實(shí)際上是市場(chǎng)上提供的一切，以及壟斷溢價(jià)的前景作為獎(jiǎng)勵(lì)！在提供此類賞金的情況下，
與互聯(lián)網(wǎng)的許多其他方面一樣，我們看到一個(gè)多樣化且競(jìng)爭(zhēng)激烈的環(huán)境正在轉(zhuǎn)變?yōu)橐唤M高度集中的環(huán)境，從而導(dǎo)致現(xiàn)有卡特爾和壟斷企業(yè)的形成。這種中心化的環(huán)境產(chǎn)生了一系列關(guān)鍵的依賴關(guān)系，因此當(dāng)失敗發(fā)生時(shí)，在這個(gè)領(lǐng)域是不可避免的，它們將從少數(shù)人的小不便轉(zhuǎn)變?yōu)橐愿鞣N方式影響我們所有人的重大事件。規(guī)模和中心性不一定只會(huì)創(chuàng)建更強(qiáng)大的服務(wù)。正如我們?cè)?6 月份的這兩次特定中斷以及過(guò)去的其他中斷（例如2016 年 10 月的 DYN）中所看到的那樣，規(guī)模和中心性也給每個(gè)人帶來(lái)了更大程度的脆弱性。
