2024 年 7 月 19 日，全球約有 850 萬(wàn)臺(tái) Windows 電腦崩潰，無(wú)法重啟，陷入藍(lán)屏死機(jī)狀態(tài)。這次故障影響了全球各地的企業(yè)和政府，波及運(yùn)輸、金融服務(wù)、醫(yī)療保健等絕大多數(shù)行業(yè)。

故障發(fā)生幾小時(shí)后，藍(lán)屏原因找到，是美國(guó)網(wǎng)絡(luò)服務(wù)提供商 CrowdStrike 更新錯(cuò)誤所致。

第二天，紅迪（reddit）網(wǎng)的 AskReddit 社區(qū)（該社區(qū)旨在「討論一些下飯的問(wèn)題」），出現(xiàn)了一篇緊跟時(shí)事的帖子：「為紀(jì)念微軟藍(lán)屏事件，來(lái)聊聊你在工作中闖的最大的禍」。

圖片

讓我們從「很久很久很久以前的一場(chǎng)悲劇」開(kāi)始欣賞打工人干的好事。

網(wǎng)友 pm1966 公司曾經(jīng)的 DBA 在測(cè)試時(shí)注釋了 WHERE 子句，導(dǎo)致數(shù)百萬(wàn)條記錄在幾秒鐘內(nèi)消失。事情發(fā)生在周五下午，混亂持續(xù)了整個(gè)周末。

他現(xiàn)在的評(píng)價(jià)是，這事不能完全歸咎于他；但假如他對(duì)自己的數(shù)據(jù)庫(kù)編程更有信心，他本可以迅速發(fā)現(xiàn)這個(gè)錯(cuò)誤。

圖片

網(wǎng)友 slyiscoming 想到了大量數(shù)據(jù)造成的堵塞。他曾經(jīng)為客戶關(guān)閉一個(gè)大型數(shù)據(jù)庫(kù)，服務(wù)器花了 3 天時(shí)間才恢復(fù)。他還在更新一個(gè)生產(chǎn)型客戶的測(cè)試環(huán)境時(shí)，工作到凌晨 3 點(diǎn)，才將更改回滾，因?yàn)楫?dāng)時(shí)他們還沒(méi)有回滾腳本。

圖片

網(wǎng)友 quiggyfish 因?yàn)闆](méi)有重視備份，花了團(tuán)隊(duì)大量的精力，才從誤刪所有數(shù)據(jù)庫(kù)的災(zāi)難性事故中復(fù)原。

圖片

網(wǎng)友 eury13 當(dāng)時(shí)在一家初創(chuàng)軟件公司工作。某天臨下班時(shí)，他在內(nèi)部管理平臺(tái)上照常注銷取消訂單的客戶賬戶。CEO 突然路過(guò)，注意到平臺(tái)上離職員工的名字，并要求他將這些賬戶一并注銷。

但前員工的一些用戶賬戶被硬編碼到了他們的代碼庫(kù)中，這意味著一旦這些賬戶被注銷，系統(tǒng)就會(huì)因無(wú)法完成各種進(jìn)程而癱瘓。

團(tuán)隊(duì)通過(guò)重新啟用舊的用戶賬戶解決了這個(gè)問(wèn)題，他也沒(méi)有惹上麻煩。但要為這種麻煩事加班，真是糟糕……

圖片

同一個(gè)公司，同一個(gè) eury13，還有一個(gè)故事，是關(guān)于數(shù)據(jù)庫(kù)開(kāi)放寫(xiě)入權(quán)限的后果。

他們的公司管理賬戶時(shí)，必須手動(dòng)更改 SQL 數(shù)據(jù)庫(kù)。某次他弄錯(cuò)了 ID 號(hào)，因此錯(cuò)誤地注銷了一個(gè)用于系統(tǒng)監(jiān)控的賬戶。監(jiān)控工具發(fā)現(xiàn)后發(fā)送了大量警報(bào)，在各種系統(tǒng)中引發(fā)連鎖故障，系統(tǒng)又癱瘓了。

雖然他又一次沒(méi)有被解雇，監(jiān)控賬戶重新打開(kāi)，一切恢復(fù)正常，但他事后想想，那家公司的系統(tǒng)簡(jiǎn)直是個(gè)紙牌搭的房子。他們沒(méi)有任何控制措施來(lái)防止像這樣的無(wú)辜失誤造成巨大的連帶問(wèn)題。

圖片