中國銀行總行大數(shù)據(jù)平臺——集中式架構(gòu)向分布式架構(gòu)轉(zhuǎn)型
項目背景
近年來,隨著大數(shù)據(jù)時代的到來,中行的數(shù)據(jù)規(guī)模增長迅速,數(shù)據(jù)來源、形態(tài)也呈多樣化趨勢,對于海量數(shù)據(jù)的多層次、高時效分析挖掘需求日益增加。
需求分析
基于開放X86的MPP架構(gòu)分析型數(shù)據(jù)庫作為中行大數(shù)據(jù)建設的重要組成部分,支持中行后線數(shù)據(jù)類應用系統(tǒng)數(shù)據(jù)庫由集中式架構(gòu)向分布式架構(gòu)轉(zhuǎn)型,在成本可控的同時,大幅提高大數(shù)據(jù)計算處理能力,提升業(yè)務體驗。
解決方案
本項目采用天津南大通用公司自主研發(fā)的GBase 8a MPP Cluster產(chǎn)品。該產(chǎn)品面向海量數(shù)據(jù)分析型應用領域,采用基于X86的Shared nothing 分布式架構(gòu),以獨特的列存儲,壓縮和智能索引技術為基礎,用于滿足各個數(shù)據(jù)密集型行業(yè)日益增大的數(shù)據(jù)分析、數(shù)據(jù)挖掘、數(shù)據(jù)備份和即席查詢等需求,可用做數(shù)據(jù)倉庫系統(tǒng)、BI 系統(tǒng)和決策支持系統(tǒng)的承載數(shù)據(jù)庫。
總行已上線國內(nèi)反洗錢監(jiān)控分析系統(tǒng)3號令改造及智能化建設項目、SAS模型管理平臺、監(jiān)控標準化數(shù)據(jù)報送平臺、審計智能分析平臺、整合風險和數(shù)據(jù)集市項目、風險數(shù)據(jù)集市、個金產(chǎn)品組合管理系統(tǒng)配套項目、反洗錢及內(nèi)控2019關鍵項目、中銀數(shù)創(chuàng)平臺和信息管理報表系統(tǒng)等十套應用。共13個集群,280個節(jié)點,總數(shù)據(jù)量1530TB。全面支持總行數(shù)據(jù)分析型場景。
價值體現(xiàn)
高性能的通用計算平臺:利用GBase 8a集群的高性能、高穩(wěn)定性的特點,為客戶提供了高性能、低價的通用計算平臺。
分行服務創(chuàng)新:創(chuàng)新性的部署一套集群為分行解決了數(shù)據(jù)基礎、計算平臺、應用模式的統(tǒng)一。面向科技人員提供支撐分行特色批量開發(fā)部署,面向業(yè)務人員提供支撐便捷靈活自主用數(shù),打造了一個“一站式的數(shù)據(jù)應用分析工作平臺”。
海量數(shù)據(jù)管理:為用戶提供了并行海量復雜數(shù)據(jù)處理平臺,幫助客戶形成PB級以上的業(yè)務。