- +1
“雙11”幕后:支付寶曾差4秒就崩潰,今年只需十幾人待命
今天的天貓“雙11”臨近了。2016年的“雙11”,支付寶交易峰值達(dá)到每秒12萬筆,是前一年的1.4倍,但你可能意料不到:支付寶專門為此提供技術(shù)保障的不到30人。
“今年‘雙11’,技術(shù)保障人員會降到十幾人,到2019年,‘雙11’將從一年一度的‘支付大考’變?yōu)槌B(tài)化?!?0月25日,螞蟻金服副總裁、首席技術(shù)架構(gòu)師胡喜告訴澎湃新聞(www.nxos.com.cn)。
在大家印象中,“雙11”當(dāng)天,阿里應(yīng)該是所有員工嚴(yán)陣以待,公司里到處是帳篷、睡袋,桌上堆滿“紅?!?。
“以前確實(shí)是這樣,但現(xiàn)在越來越輕松了,希望今年不喝‘紅?!?,能慢悠悠喝紅酒?!焙残ΨQ。

澎湃新聞了解到,三四年前,支付寶還要將公司80%左右的技術(shù)人員投入“雙11”技術(shù)保障。更早的2010年,即“雙11”啟動(dòng)第二年,支付寶當(dāng)時(shí)幾百名技術(shù)人員全部坐在電腦前。
“一有問題立馬要處理,不行就重啟機(jī)器,容量不夠就加機(jī)器,靠‘人肉云計(jì)算’撐著。”胡喜告訴澎湃新聞,可問題還是出現(xiàn)了,險(xiǎn)些讓支付寶乃至整個(gè)淘寶崩盤。
2010年“雙11”前,支付寶的系統(tǒng)規(guī)劃是按每年增長100%的余量預(yù)估的,即系統(tǒng)保持一倍余量。
“大家都覺得肯定夠了,出現(xiàn)問題也可以等到交易量增長到一定程度時(shí)加資源。”螞蟻金服首席技術(shù)官程立回憶,但當(dāng)天零點(diǎn)剛過,交易量迅速攀升到平時(shí)最高值三倍,到7點(diǎn)還沒有下降。
“我們意識到當(dāng)天的交易量一定會遠(yuǎn)超系統(tǒng)容量?!背塘⒄f,所有技術(shù)人員如臨大敵,開始不?!鞍豳Y源”,哪里有富余的計(jì)算資源就拿來應(yīng)急,再不夠就“砍業(yè)務(wù)”,把一些暫時(shí)可以犧牲的業(yè)務(wù)砍掉,將資源搬過來。
到23時(shí)59分30秒,眼看“雙11”就要結(jié)束,支付寶核心賬務(wù)系統(tǒng)突然報(bào)警。一名當(dāng)時(shí)在場的技術(shù)人員向澎湃新聞描述:“嘀嘀嘀的警報(bào)聲讓每個(gè)人發(fā)急,負(fù)責(zé)數(shù)據(jù)庫的同事沖過來喊‘資源馬上耗盡!趕緊殺掉非關(guān)鍵應(yīng)用!’”
那時(shí),支付寶的賬務(wù)數(shù)據(jù)庫還沒有拆分,而所有交易都經(jīng)過虛擬賬戶,一旦核心賬務(wù)系統(tǒng)出問題,支付寶所有業(yè)務(wù)都會停掉,數(shù)據(jù)庫再想恢復(fù)要很長時(shí)間——出現(xiàn)這種情況,對淘寶和支付寶都是災(zāi)難性的。
幾秒鐘內(nèi),技術(shù)團(tuán)隊(duì)決定臨時(shí)把一個(gè)會計(jì)系統(tǒng)的應(yīng)用“殺掉”,騰出系統(tǒng)資源。
負(fù)責(zé)消息系統(tǒng)的技術(shù)人員爭分奪秒地在機(jī)器上敲入一行行代碼,緊急殺掉非關(guān)鍵應(yīng)用。鍵入最后一行代碼,將一個(gè)會計(jì)系統(tǒng)的應(yīng)用“殺掉”,把資源釋放出來時(shí),離數(shù)據(jù)庫崩潰只剩四秒。
“我們開始反思,支付寶怎么頂住每年‘雙11’的業(yè)務(wù)量?”程立說,傳統(tǒng)型構(gòu)架已無法支撐,“雙11”倒逼支付寶開始搭建云計(jì)算技術(shù)構(gòu)架。
胡喜說,2010年是支付寶技術(shù)發(fā)展的拐點(diǎn),“我們分析了整個(gè)業(yè)界架構(gòu),支付寶遇到的問題已不是任何現(xiàn)有業(yè)界技術(shù)可以解決的,必須自己趟出解決之道。”
從傳統(tǒng)型構(gòu)架向云計(jì)算構(gòu)架過渡,支付寶花了三年,自主研發(fā)了中間件、數(shù)據(jù)庫、大數(shù)據(jù)平臺。這個(gè)云計(jì)算架構(gòu),使后來的天貓“雙11”平穩(wěn)進(jìn)行。
“如果這件事做得晚一點(diǎn),這幾年的‘雙11’就別想挺過來?!背塘⒄f,現(xiàn)在螞蟻金服已開始研發(fā)下一代構(gòu)架,是一個(gè)適應(yīng)數(shù)據(jù)開放、互聯(lián)、全球化的架構(gòu)。
“2016年‘雙11’的技術(shù)保障可以說毫無壓力,理論上可以做到每秒百萬級的交易支付能力,今年應(yīng)該會更輕松。”胡喜表示。





- 報(bào)料熱線: 021-962866
- 報(bào)料郵箱: news@thepaper.cn
互聯(lián)網(wǎng)新聞信息服務(wù)許可證:31120170006
增值電信業(yè)務(wù)經(jīng)營許可證:滬B2-2017116
? 2014-2026 上海東方報(bào)業(yè)有限公司




