從大連銀行的IT實踐看BI的正解
- 來源:中國信息化周報 smarty:if $article.tag?>
- 關鍵字:大連銀行,啟動基礎數(shù)據(jù)平臺,商業(yè)智能 smarty:/if?>
- 發(fā)布時間:2016-05-25 10:17
如今,我們不斷感受科技變革帶來的便捷,當微信支付已經(jīng)成為習慣時,ApplePay又背靠銀聯(lián)雄赳赳闖入第三方支付領域,在這樣的變革趨勢下,新的模式挑戰(zhàn)著已有的盈利模式,商業(yè)智能對于企業(yè)運營起著關鍵的作用。就拿銀行來說,亟須構(gòu)建一個能夠讓所有的管理模塊實現(xiàn)信息交互、直接交互和互通的數(shù)據(jù)平臺來實現(xiàn)商業(yè)智能,這其實意味著要從老的僵化的架構(gòu)平臺向新的平臺轉(zhuǎn)換。
但新舊系統(tǒng)平臺的轉(zhuǎn)型和遷移是一個整體系統(tǒng)工程,金融系統(tǒng)對穩(wěn)定性要求可以用極致來形容。為了給客戶良好的體驗,就有無數(shù)個應用在運轉(zhuǎn),無數(shù)次升級疊加、無數(shù)種操作系統(tǒng)、無數(shù)臺服務器、IT架構(gòu)的復雜性完全可以想象出來。
說到底,銀行業(yè)是容不得試錯的。在同業(yè)競爭日益激烈的環(huán)境下,大連銀行用創(chuàng)新思維撬動業(yè)務發(fā)展,建設新一代基礎數(shù)據(jù)平臺,實現(xiàn)商業(yè)智能。
在這個過程中,大連銀行也成為第一位吃螃蟹者,選擇了天梭K1+DB2的解決方案,從商業(yè)智能的核心數(shù)據(jù)倉庫入手,通過對數(shù)據(jù)的挖掘,洞察業(yè)務,迅速決策,繼而實現(xiàn)業(yè)務快速開發(fā)和創(chuàng)新。
I+O為何傳統(tǒng)保守
2008年,大連銀行的啟動基礎數(shù)據(jù)平臺建設,由國外小型機和Oracle數(shù)據(jù)庫共同組成基礎軟、硬件平臺,在當時還可以滿足銀行業(yè)務的需求。但最近幾年,大連銀行總資產(chǎn)一直保持平穩(wěn)增長,不斷推出“九鉆完美貴賓卡”、“電子銀行”、“貿(mào)易服務”等金融業(yè)務,分行數(shù)量不斷增多,而“I+O”就是需要進行突破的環(huán)節(jié)。比如原有的系統(tǒng)平臺架構(gòu),就采用兩臺小型機與共享存儲的方式構(gòu)建,這樣的架構(gòu)一般都用于這種交易型的業(yè)務類型。對于管理類的業(yè)務,通過Share-Disk的架構(gòu),當業(yè)務規(guī)模不斷擴大的時候,整個系統(tǒng)的擴展性和性能都會受到很大的制約。
2012年,大連銀行邁出了創(chuàng)新的第一步。當時大連銀行和浪潮合作了國家課題,將天梭K1替代了國外小型機,運行過程中K1不僅穩(wěn)定,性能也有所提升。
大連銀行希望在K1基礎之上,找到一款合適的數(shù)據(jù)庫產(chǎn)品,把整個平臺的體系架構(gòu)做一次大的升級,解決原有架構(gòu)中的以下瓶頸:
第一,計算資源的瓶頸。由于平臺硬件架構(gòu)過老,計算資源不足,CPU、內(nèi)存資源嚴重不匹配,計算資源性能下降,并且計算資源不能實現(xiàn)平穩(wěn)擴展,故障率較高,運維難度大等系列挑戰(zhàn)。
第二,業(yè)務性能瓶頸。原有數(shù)據(jù)平臺不能滿足系統(tǒng)業(yè)務性能需求,綜合信息服務平臺跑批時間歷時13個小時,匯總層業(yè)務歷時近11個小時,遠遠不能滿足業(yè)務對數(shù)據(jù)展現(xiàn)的時效性要求。在此背景下,企業(yè)內(nèi)部經(jīng)營管理和面向監(jiān)管層面的數(shù)據(jù)報送壓力就十分巨大。為此,大連銀行要建設新一代基礎數(shù)據(jù)平臺必須具備以下的特質(zhì):穩(wěn)定可靠、彈性伸縮的計算的資源、實現(xiàn)跑批作業(yè)的并行處理、存儲過程并行效率優(yōu)化。
對于大連銀行來說,最大的挑戰(zhàn)是如何找到比Oracle數(shù)據(jù)庫還有競爭力的解決方案,并實現(xiàn)新舊系統(tǒng)的順利遷移。
K1+DB2如何勝任關鍵運營
在與供應商的不斷溝通和驗證后,大連銀行選擇天梭K1+DB2的解決方案,構(gòu)建新一代基礎數(shù)據(jù)平臺,這個方案當時在國內(nèi)并沒有可以借鑒的案例。
不過這沒有阻擋大連銀行前進的步伐,是責任也是創(chuàng)新需要,大連銀行開始了技術探索和團隊的磨礪之路。大連銀行首席信息官田野認為:“從國家自主可控的角度,加上之前參與國家課題的經(jīng)驗,以及對K1和浪潮技術的了解,大連銀行需要為自主可控和高端產(chǎn)品的國產(chǎn)化作出嘗試和創(chuàng)新。”
由此,浪潮成立了專門的實施團隊與IBM、文思海輝等合作伙伴共同配合,為大連銀行提供相應服務。
看商業(yè)智能的正解
在新一代基礎數(shù)據(jù)平臺方案中,浪潮K1承擔核心數(shù)據(jù)庫服務器的角色,DB2作為主要的基礎數(shù)據(jù)庫,利用DPF數(shù)據(jù)庫分區(qū)功能,實現(xiàn)MPP系統(tǒng)架構(gòu),滿足企業(yè)未來分布式計算以及擴展的需要。
第一,在硬件架構(gòu)中,浪潮天梭K1930服務器配備了16顆處理器,通過四個物理分區(qū)實現(xiàn)了業(yè)務隔離。其中兩個分區(qū)用于部署數(shù)據(jù)庫和生產(chǎn),另外兩個分區(qū)用于業(yè)務測試。
第二,新舊系統(tǒng)遷移的過程主要分為評估、計劃、驗證、測試和上線五個階段,其中的重點是數(shù)據(jù)遷移和應用改造以及POC驗證三大部分。
遷移的工作是重中之重,此次遷移包括平臺遷移,數(shù)據(jù)庫遷移和業(yè)務的遷移。
比如數(shù)據(jù)遷移,大連銀行本來就有兩大疑慮:此前沒有案例可以借鑒;從Oracle到DB2的跨平臺的遷移,數(shù)據(jù)量這么大,會不會丟失?會不會出現(xiàn)平臺不一致,數(shù)據(jù)庫無法相融的局面?
三方工程師根據(jù)兩款數(shù)據(jù)庫的差異,進行了有針對性的調(diào)整,提出了三套解決方案進行驗證,但測試成績均不理想。在此過程中,大連銀行完全按照遷移時間窗口的最大容忍度要求,制定遷移速率指標,即在12小時內(nèi)完成1.5T數(shù)據(jù)量的遷移工作。為達到這一目標,整個項目團隊利用了近一個月的時間,開發(fā)測試完畢最終的遷移工具。該工具采用標準OCI接口進行開發(fā),支持自定義的并行度設置,從而滿足遷移過程中的數(shù)據(jù)導出要求。從新舊平臺測試的性能對比來看,新平臺無論在哪個階段,都比老系統(tǒng)有了明顯的提升。
第三,新舊系統(tǒng)平臺平滑切換后,以下事實和數(shù)據(jù)證明,新一代基礎數(shù)據(jù)平臺運行時間更短,效率更高。其中,文件加載性能提高76%,基礎數(shù)據(jù)平臺處理性能提高60%,整合處理性能提高88%,匯總處理性能提高34%,數(shù)據(jù)卸載性能提高38%。
新一代基礎數(shù)據(jù)平臺對原有平臺有良好的兼容性,浪潮主機系統(tǒng)事業(yè)部工程師孫寧特意指出,很多客戶以為遷移的工作量會非常大,特別是代碼改寫會耗時間耗資源,但通過大連銀行的實際遷移來看,代碼修改范圍僅限于DDL層面,代碼修改總量少于1%,整個項目遷移的風險低,是完全可控的。
新平臺的“氣質(zhì)”
從大連銀行新一代基礎數(shù)據(jù)平臺建設來看,選擇K1+DB2的方案,只需要在原有系統(tǒng)上擴展完全滿足未來業(yè)務的需求。
第一,管理提升,實現(xiàn)業(yè)務洞察。大連銀行通過構(gòu)建商業(yè)智能數(shù)據(jù)倉庫平臺,實現(xiàn)業(yè)務數(shù)據(jù)收集、管理與分析;挖掘數(shù)據(jù)知識與價值,洞察業(yè)務,提升業(yè)務管理與決策水平。
第二,迅速決策,精準營銷。通過數(shù)據(jù)可以看到,高性能、高擴展的解決方案架構(gòu),讓大連銀行商業(yè)智能分析平臺得到了近4倍的效率提升。原來的平臺通過十幾個小時出的報表,現(xiàn)在幾個小時就可以出來,借助商業(yè)智能,實現(xiàn)即席查詢與預測分析,精準定位,主動營銷。
第三,風險管控,降低TCO??捎玫姆桨讣軜?gòu)加上本地化的專家專業(yè)的服務運維保障,大連銀行可以從容實現(xiàn)風險管控。另外,可用性99.9994%以上配合高可用解決方案,保障系統(tǒng)實時在線,“零”計劃外宕機,這樣高性價比的端到端交付軟硬件平臺創(chuàng)新,降低TCO。
第四,創(chuàng)新加速,驅(qū)動未來。通過合理化的結(jié)構(gòu)設計,實現(xiàn)彈性的擴展,比如硬件分區(qū)與DB2 DPF技術的方案創(chuàng)新,可擴展到近千個節(jié)點,實現(xiàn)資源隨需調(diào)度,性能近線性增長,同時基于BI平臺,銀行可實現(xiàn)業(yè)務快速開發(fā)與創(chuàng)新。由此看來,采用國產(chǎn)主機和數(shù)據(jù)平臺是可以承擔銀行的關鍵業(yè)務的,而在浪潮、IBM、文思海輝強強聯(lián)合下,K1+DB2成為城商行第一個多方合作落地項目的成功案例。
■本報記者 陳曲
