最近,F(xiàn)acebook官方針對這次大規(guī)模宕機的原因做了回應(yīng)。
![]()
這一新聞已經(jīng)出現(xiàn)在了微博熱榜。
而在回復(fù)中,官方也(針對各種神奇的假說)強調(diào):
沒有黑客惡意攻擊行為,用戶的數(shù)據(jù)也沒有受到損害。
![]()
在第二天,F(xiàn)acebook又發(fā)了另一則聲明,詳細地說明了這次宕機的技術(shù)細節(jié)。
那么這場Facebook有史以來持續(xù)時間最長,規(guī)模最大,造成公司股價蒸發(fā)百億的宕機到底是因為什么?
一起來看看。
日常維護切斷網(wǎng)絡(luò)
一切都開始于日常維護中的一條錯誤指令。
也就是Facebook engineering平臺上的聲明中所提到的“配置變化”:
協(xié)調(diào)數(shù)據(jù)中心之間網(wǎng)絡(luò)流量的主干路由器的配置變化導(dǎo)致了通信中斷,進而影響了數(shù)據(jù)中心的的通信方式,最后導(dǎo)致了服務(wù)中斷。
![]()
在日常維護網(wǎng)絡(luò)基礎(chǔ)設(shè)施時,工程師經(jīng)常需要離線維護部分主干網(wǎng),比如修理一條光纖線路,增加更多容量,或者更新路由器本身的軟件。
而上面提到的“配置變化”,就是日常維護工作中主要用于檢測Facebook主干網(wǎng)絡(luò)的可用性的一條命令。
當(dāng)然肯定有應(yīng)對這種命令的保護措施,但不巧審計工具(audit tool)中出了個bug……
![]()
于是,這個“配置變化”就撒著歡兒,啪一下把Facebook主干網(wǎng)絡(luò)的所有連接都給切斷了。
這一斷,應(yīng)用程序?qū)?shù)據(jù)的刷新搜索,上傳下載等請求就無法從用戶設(shè)備傳到最近的數(shù)據(jù)中心了。
而這些數(shù)據(jù)中心不僅有容納了數(shù)百萬臺存儲數(shù)據(jù)機器,用于支撐平臺運行的大型建筑,還有將主干網(wǎng)絡(luò)連接到更廣泛的互聯(lián)網(wǎng)和具體應(yīng)用平臺的較小設(shè)施。
嗯,差不多就是這樣的嚴重性……
![]()
這還沒完。
上述數(shù)據(jù)中心里的小型設(shè)施還有一個工作,那就是響應(yīng)DNS查詢。
DNS是互聯(lián)網(wǎng)的地址簿,能夠?qū)g覽器中鍵入的簡單網(wǎng)絡(luò)名稱轉(zhuǎn)換為特定的服務(wù)器IP地址。
而這些地址又通過邊界網(wǎng)關(guān)協(xié)議(BGP)向互聯(lián)網(wǎng)其他地址進行廣播,類似一個地圖,提供通往各種目的地的線路。
當(dāng)DNS服務(wù)器發(fā)現(xiàn)主干網(wǎng)絡(luò)失去了與互聯(lián)網(wǎng)的連接時,BGP的“廣播”也隨之停止。
抹除了存在
相當(dāng)于Facebook短暫地被從互聯(lián)網(wǎng)這塊地圖上。
只有Facebook受傷的世界完成了
當(dāng)然,在派遣工程師進入現(xiàn)場數(shù)據(jù)中心進行修復(fù)之后,網(wǎng)絡(luò)服務(wù)也在10月4日下午4點左右逐漸恢復(fù)。
![]()
在官方回復(fù)的最后,他們也提到會通過這次的“演習(xí)”加強系統(tǒng)故障的測試、訓(xùn)練和整體恢復(fù)能力。
而縱觀這次全球大宕機,不僅國外熱度爆表,就連國內(nèi)也上了熱搜。
![]()
國內(nèi)外的網(wǎng)友們弔圖一堆,苦中作樂。
![]()
同為社交媒體的Twitter則高傲盡數(shù)顯現(xiàn)。

甚至連Netflix都過來蹭了把熱度,順帶了夾雜了新劇宣傳私貨:
![]()
而Facebook在這次事件中股價暴跌6%,扎克伯格個人財富一日蒸發(fā)逾60億美元。
現(xiàn)在看來,只有小扎受傷的世界完成了(狗頭)。【責(zé)任編輯/額發(fā)】
來源:量子位
IT時代網(wǎng)(關(guān)注微信公眾號ITtime2000,定時推送,互動有福利驚喜)所有原創(chuàng)文章版權(quán)所有,未經(jīng)授權(quán),轉(zhuǎn)載必究。
創(chuàng)客100創(chuàng)投基金成立于2015年,直通硅谷,專注于TMT領(lǐng)域早期項目投資。LP均來自政府、互聯(lián)網(wǎng)IT、傳媒知名企業(yè)和個人。創(chuàng)客100創(chuàng)投基金對IT、通信、互聯(lián)網(wǎng)、IP等有著自己獨特眼光和豐富的資源。決策快、投資快是創(chuàng)客100基金最顯著的特點。
小何
小何
小何
來自: 【人物】滴滴創(chuàng)始人程維回顧與Uber競爭:中國互聯(lián)網(wǎng)從來沒有輸過--IT時代網(wǎng)
小何
來自: 少年頭條對壘中年騰訊:解局兩代互聯(lián)網(wǎng)公司商業(yè)之戰(zhàn)--IT時代網(wǎng)