上海2016年11月14日電 /美通社/ -- 2016年11月11日凌晨零點(diǎn)，“雙十一”網(wǎng)絡(luò)促銷狂歡正式啟動(dòng)。開場(chǎng)1小時(shí)57秒，總成交額突破362億元，已超過2013年“雙十一”全天交易額。剁手黨順利下單付款，火爆成績(jī)的背后，少不了對(duì)銀行系統(tǒng)高并發(fā)訪問的考驗(yàn)。
從10日晚上開始，天旦的幾十位工程師精神滿滿，與銀行的工作人員運(yùn)籌帷幄、群策群力，為今年的“雙十一”狂歡交易通宵保障。而這一長(zhǎng)串幾十家的保障名單，幾乎重疊了支付寶的交易榜單。
備戰(zhàn)“雙十一”的不止是商家，還有金融系統(tǒng)
凌晨，零點(diǎn)剛過11分，招商銀行數(shù)據(jù)中心監(jiān)控大屏上顯示，信用卡交易額已突破10億元。而在另一家股份制銀行，19分鐘內(nèi)交易筆數(shù)突破100萬，交易峰值比去年整整提高了70%。
這邊“剁手黨們”搶購(gòu)正歡的同時(shí)，另一邊，銀行的工作人員和天旦的工程師們?nèi)找箠^戰(zhàn)，全力保障銀行交付系統(tǒng)穩(wěn)定運(yùn)行。對(duì)銀行來說，“雙十一”重要、核心的考驗(yàn)就是交易量的猛增，平時(shí)夜間每秒處理100筆的系統(tǒng)，在“雙十一”期間可能要面臨30多倍甚至更多倍的增長(zhǎng)，但凡其中任何一個(gè)細(xì)小的環(huán)節(jié)無法承受高交易量的負(fù)荷，都將造成業(yè)務(wù)中斷，導(dǎo)致用戶交易失敗，無法順利“秒殺”。
從年初開始，招商銀行數(shù)據(jù)中心專門立項(xiàng)，完成關(guān)鍵系統(tǒng)服務(wù)器擴(kuò)容、存儲(chǔ)設(shè)備升級(jí)，進(jìn)行應(yīng)用優(yōu)化，集中精力解決支付瓶頸，分拆熱點(diǎn)日志，優(yōu)化負(fù)載均衡，提高數(shù)據(jù)庫訪問效率。同時(shí)，對(duì)各種風(fēng)險(xiǎn)異常場(chǎng)景進(jìn)行梳理，制定應(yīng)急策略，建立了一整套快速應(yīng)急響應(yīng)指揮機(jī)制，并全面落實(shí)7x24小時(shí)現(xiàn)場(chǎng)值班保障。
不止是招商銀行，各銀行紛紛提前2至3個(gè)月就著手進(jìn)行壓力測(cè)試，模擬巨量交易并發(fā)，測(cè)試系統(tǒng)的承受能力，針對(duì)問題系統(tǒng)或環(huán)節(jié)及時(shí)優(yōu)化。尤其是在天旦業(yè)務(wù)性能管理工具BPC和NPM的整合使用，能夠幫助銀行數(shù)據(jù)中心進(jìn)行有交易量、性能指標(biāo)、網(wǎng)絡(luò)層指標(biāo)的精確容量規(guī)劃。也能夠給開發(fā)中心持續(xù)優(yōu)化核心系統(tǒng)性能，提供可靠依據(jù)。
同時(shí)，隨著“雙十一”的臨近，部署在各行的天旦BPC和NPM也會(huì)進(jìn)行更加細(xì)致的調(diào)整，依靠大數(shù)據(jù)分析技術(shù)對(duì)海量歷史性能數(shù)據(jù)進(jìn)行告警模擬和精確設(shè)置。
銀行圓滿完成“雙十一”交易量考驗(yàn)
11月11日凌晨，“戰(zhàn)火”一觸即發(fā)。
在各家銀行的監(jiān)控中心，天旦BPC/NPM，以及Smart View 立體監(jiān)控視圖，發(fā)揮著關(guān)鍵的實(shí)時(shí)性能監(jiān)控作用。銀行領(lǐng)導(dǎo)在ECC關(guān)注著Team Vision業(yè)務(wù)大屏上緊張?zhí)鴦?dòng)的交易量和交易金額，現(xiàn)場(chǎng)主機(jī)、應(yīng)用、網(wǎng)絡(luò)、開發(fā)部門使用BPC和NPM進(jìn)行實(shí)時(shí)監(jiān)測(cè)和及時(shí)的異常分析，成功地保障著銀行電子支付業(yè)務(wù)的卓越運(yùn)行。
零點(diǎn)02分，某行發(fā)現(xiàn)交易時(shí)間達(dá)到6秒，已遠(yuǎn)遠(yuǎn)超過50毫秒的正常值，天旦BPC快速定位問題，立刻發(fā)現(xiàn)是由于在處理前端交易時(shí)，系統(tǒng)對(duì)用戶信息的核對(duì)耗時(shí)過長(zhǎng)，迅速快速調(diào)整，恢復(fù)業(yè)務(wù)的快速運(yùn)轉(zhuǎn)。
一家股份制銀行數(shù)據(jù)中心總經(jīng)理對(duì)天旦提供的立體監(jiān)控方案給予了高度評(píng)價(jià)：“不但為業(yè)務(wù)保障提供了實(shí)時(shí)、精準(zhǔn)的監(jiān)控分析能力，而且在核心系統(tǒng)開發(fā)、測(cè)試和上線和優(yōu)化過程也發(fā)揮了極大的促進(jìn)作用。”
天旦保障小分隊(duì)和某商業(yè)銀行用戶
作為技術(shù)支持，在緊迫的時(shí)間內(nèi)解決各大銀行網(wǎng)絡(luò)部門在雙十一所面臨的問題，天旦BPC給出了一份優(yōu)秀的答卷：
即便是事先模擬一百次，也無法準(zhǔn)確預(yù)料現(xiàn)場(chǎng)將會(huì)發(fā)生什么。在“雙十一”當(dāng)天，在各銀行監(jiān)控中心，BPC、NPM實(shí)時(shí)反應(yīng)業(yè)務(wù)運(yùn)行狀況，發(fā)現(xiàn)問題準(zhǔn)確定位，提前告警幫助銀行用戶切換預(yù)案，確保業(yè)務(wù)的運(yùn)轉(zhuǎn)。同時(shí)，BPC為銀行負(fù)責(zé)人提供全面、實(shí)時(shí)、準(zhǔn)確的視角，以便隨時(shí)掌握業(yè)務(wù)發(fā)展的情況。
對(duì)于“雙十一”激增交易量的極端情況，如果少了BPC會(huì)怎么樣？
“銀行如果依靠各部門的監(jiān)控工具自行監(jiān)測(cè)，運(yùn)用各自的統(tǒng)計(jì)口徑，無法直接對(duì)應(yīng)業(yè)務(wù)，就需要靠專家經(jīng)驗(yàn)來進(jìn)行分析?！碧斓┑馁Y深技術(shù)工程師表示，“在系統(tǒng)非常龐大，時(shí)間極度緊迫的情況下，往往排障的時(shí)間會(huì)很長(zhǎng)。還有一種做法就是，為了應(yīng)對(duì)到來的峰值，準(zhǔn)備遠(yuǎn)遠(yuǎn)超過實(shí)際需求的資源投入，比如提前準(zhǔn)備數(shù)倍的硬件資源和網(wǎng)絡(luò)帶寬，但最終實(shí)際業(yè)務(wù)量可能只增加不到一倍。
在今年“雙十一”的銀行極端交易量前，天旦的核心技術(shù)“互聯(lián)數(shù)據(jù)（Wire data）”顯示出了實(shí)時(shí)、全量、客觀的優(yōu)勢(shì)，天旦的技術(shù)支持團(tuán)隊(duì)與各銀行的工作人員徹夜奮戰(zhàn)，為今年的“雙十一”提供堅(jiān)實(shí)的保障，交上了一份滿意的答卷。
