編譯:伯樂在線/
上周我和同事們簡(jiǎn)單地聊了聊我們工作中搞砸的那些事兒。如今早已不再犯那些錯(cuò)了,所以想起過去就覺得很好笑。但是笑歸笑,其實(shí)當(dāng)時(shí)犯的這些錯(cuò)讓我們受益頗深。
(:Snecx)
分享自己犯錯(cuò)的經(jīng)歷至關(guān)重要,能讓別人從中吸取經(jīng)驗(yàn)教訓(xùn),而且可能讓他們工作起來更上手。我在這兒記錄了幾條自己最近犯的錯(cuò)。
為什么有那么多生產(chǎn)數(shù)據(jù)庫被誤刪?
幾個(gè)月之前, 上發(fā)了一篇文章,寫的是一個(gè)入門級(jí)開發(fā)人員在上班第一天就誤刪了生產(chǎn)數(shù)據(jù)庫。我們看到類似這種有人犯了特大的、不可磨滅的錯(cuò)誤的文章,都不免心生畏懼。我們意識(shí)到自己并不是沒可能犯那種錯(cuò)——大多數(shù)時(shí)候都是懸崖勒馬。
我在干第一份工作的時(shí)候,有一個(gè)高級(jí)數(shù)據(jù)庫管理員在上班第一天就誤刪了生產(chǎn)數(shù)據(jù)庫,這種例子簡(jiǎn)直比比皆是。工作團(tuán)隊(duì)用一周前舊的數(shù)據(jù)庫備份幫他彌補(bǔ)了過失,讓他保住了工作。如今十年過去了,都仍用這件事拿他開涮。
今年年初有天早上,我被叫去調(diào)查一個(gè)客戶生產(chǎn)中出現(xiàn)的問題。他們本來要針對(duì)一小部分用戶進(jìn)行產(chǎn)品的 β 測(cè)試,但是他們的網(wǎng)站首頁突然什么都顯示不出來了。我猜想可能是系統(tǒng)有 bug 或者有漏洞所致。
我登錄進(jìn)生產(chǎn)機(jī)器,調(diào)出數(shù)據(jù)庫,發(fā)現(xiàn) 表是空的。OK,這證實(shí)了網(wǎng)頁顯示空白的情況。
用戶表里面還是有用戶的,這就奇怪了,所以我們丟了所有的 ,但起碼他們的測(cè)試用戶仍有他們的賬號(hào),我們可以解釋說是這是個(gè)測(cè)試版,而且這種事情時(shí)有發(fā)生。
接下來一會(huì)兒我就犯迷糊了。我記不清楚自己干了什么,我認(rèn)為自己不會(huì)蠢到在控制臺(tái)窗口輸入了刪除表中用戶的指令,可情況就是這樣——現(xiàn)在既沒有 表,也沒有用戶表。我呆坐著,感覺有點(diǎn)震驚。
然后我的大腦高速運(yùn)轉(zhuǎn)運(yùn)行時(shí)錯(cuò)誤沒有權(quán)限,開始想辦法修復(fù)問題。我真的刪掉用戶表了嗎?是的。我們運(yùn)行備份數(shù)據(jù)庫了嗎?沒有。該怎么向客戶解釋呢?我不知道。
我記得自己去找了項(xiàng)目經(jīng)理,坐在她旁邊解釋事情發(fā)生的經(jīng)過, 表中沒有數(shù)據(jù)了,所以網(wǎng)站看上去是空的。哦對(duì)了,我還誤刪了用戶表。現(xiàn)在他們需要重新邀請(qǐng)所有的用戶——如果他們還能想清楚用戶都有誰的話。哎呀。
我回到自己的座位上,感覺深受挫敗。
但是我覺得事情有些蹊蹺,我們?cè)趺纯赡芤婚_始就丟了所有的 表呢?于是我繼續(xù)深究下去,一方面是因?yàn)殡y以接受這個(gè)結(jié)果,一方面是想挽回顏面。之后過了一小會(huì)兒,我注意到了關(guān)鍵問題。
服務(wù)器上還有另外 5 個(gè)數(shù)據(jù)庫,其中一個(gè)的名字和我正在看的那個(gè)數(shù)據(jù)庫的名字非常相似。
我一檢查,發(fā)現(xiàn) 都在里面,用戶表也完好無損。事實(shí)證明是因?yàn)榕渲冒l(fā)生變化,無意間讓它變成了生產(chǎn)數(shù)據(jù)庫,導(dǎo)致網(wǎng)站指向了全新的數(shù)據(jù)庫。我在里面看到的那些用戶呢?種子數(shù)據(jù)罷了。
真是如釋重負(fù)!一早上神經(jīng)緊繃、胃酸翻涌,搞得我渾身不適,但好在我們“修復(fù)”了所有的數(shù)據(jù),并且找到了問題真正的癥結(jié)所在,沒有提前宣布誤刪數(shù)據(jù)庫的壞消息。
這個(gè)小插曲讓我們受益良多,最簡(jiǎn)單的一個(gè)就是:現(xiàn)在我們總是在給數(shù)據(jù)庫做備份……這可能是我們開發(fā)人員最有效的胃藥。
總趕進(jìn)度,卻從來趕不上進(jìn)度
我最近所犯的另一個(gè)突出 錯(cuò)誤沒那么戲劇化,實(shí)際上是由一個(gè)個(gè)小錯(cuò)誤最終累積造成了大麻煩。
我們項(xiàng)目開發(fā)的一大挑戰(zhàn)就是時(shí)間緊張(但也不全是?)
第一次開會(huì)時(shí),我們一致覺得項(xiàng)目需要的時(shí)間比我們能夠拿出來的時(shí)間多了一倍。從項(xiàng)目一開始,截止日期就步步緊逼,所以我們?nèi)挛宄屯ㄟ^了認(rèn)證環(huán)節(jié),以便進(jìn)入客戶真正關(guān)心的功能環(huán)節(jié)。
我只是之前在一個(gè)單頁 app 中落實(shí)了一次認(rèn)證,但仍然沒有徹底理解 app 各部分是如何協(xié)調(diào)的。
盡己所能用最快的速度把 app 趕出來,就是大錯(cuò)特錯(cuò),我漏掉了一些非常重要的東西:
用戶在登陸后,是通過 來加載的,但是我的 app 頁面沒有給加載提供等待時(shí)間,而是根據(jù)事件順序來決定先后的,所以服務(wù)器會(huì)回復(fù)說你沒有權(quán)限。這種錯(cuò)誤很少見,而且很難再出現(xiàn),因?yàn)榇蠖鄶?shù)情況下事件都是按照正確的順序來完成的。
而且認(rèn)證環(huán)節(jié)也從不檢查用戶令牌是否失效,如果你不經(jīng)常訪問網(wǎng)站,當(dāng)發(fā)現(xiàn)了沒法登上網(wǎng)站后,就需要注銷登錄再重新登進(jìn)去。
令牌應(yīng)該在每次發(fā)起請(qǐng)求時(shí)都進(jìn)行更新,但我從來都沒有時(shí)間去理解這些規(guī)則。所以這里又產(chǎn)生了時(shí)間問題。如果我們一次同時(shí)發(fā)出幾種請(qǐng)求,收到的回復(fù)取決于他們到來的順序,那將來發(fā)送請(qǐng)求用到的令牌就是錯(cuò)的。
我們卯足勁趕進(jìn)度運(yùn)行時(shí)錯(cuò)誤沒有權(quán)限,但最終所用的時(shí)間還是要比給定的時(shí)間多一倍。區(qū)別就是我們開發(fā)出的 app 里面漏洞更多了,然后甚而要花更多的時(shí)間對(duì)漏洞進(jìn)行追蹤和修復(fù)。
工作中的失誤讓我尷尬不已,在大家面前感到十分羞愧,因?yàn)槲野岩磺卸几阍伊恕?/p>
我要說一點(diǎn):從那之后,我開始花時(shí)間學(xué)習(xí)認(rèn)證機(jī)制,現(xiàn)在已經(jīng)理解了 OAuth,、JWT、刷新令牌和失效。我仔細(xì)閱讀了許多庫里別人寫的認(rèn)證代碼,而且建立了基于幾種不同語言版本和框架的認(rèn)證流程。
失敗是成功之母
這是每次失敗的經(jīng)歷給予我的啟發(fā)。只要你愿意學(xué)習(xí),幾乎每次這樣的經(jīng)歷都會(huì)讓你從中受益。
如果人能夠從錯(cuò)誤中吸取教訓(xùn),那么就會(huì)有所進(jìn)步。如果一個(gè)隊(duì)員是第一次犯錯(cuò),我盡量不會(huì)對(duì)他表現(xiàn)出不滿態(tài)度,他們往往已經(jīng)知道自己把事情搞糟了。
但我也努力不去苛責(zé)那些總是犯錯(cuò)、屢教不改的人,他們也需要被同情。
對(duì)待犯錯(cuò),如果你能夠做到這四點(diǎn),那么就會(huì)不斷進(jìn)步:
關(guān)于犯錯(cuò)的寶貴價(jià)值,我留給你們一則名人軼事:20 世紀(jì)初期,IBM 的總裁托馬斯·J·沃森遇到了一位因?yàn)槎啻螞Q策錯(cuò)誤讓公司損失慘重的員工,當(dāng)問及是否要開除這個(gè)員工時(shí),沃森答道:
“不,我剛剛花了 60 萬美元培訓(xùn)了他,我怎么會(huì)讓其他人雇傭他來獲得他的經(jīng)歷呢?”
你過去犯過哪些有意思的錯(cuò)?來一起分享吧!