03金篆數(shù)據(jù)庫GoldenDB金融級規(guī)模化01信創(chuàng)背景與核心挑戰(zhàn)分布式架構(gòu)轉(zhuǎn)型分布式架構(gòu)轉(zhuǎn)型1.采用分布式架構(gòu)：采用分布式數(shù)據(jù)庫進(jìn)行核心系統(tǒng)架構(gòu)升級，通過水平擴(kuò)展（增減2.通過多副本冗余機(jī)制提升系統(tǒng)可靠性3.高性能分布式事務(wù)：對于核心交易系統(tǒng)，4.兼容生態(tài)，特別是Oracle、DB2兼容性；5.方案演進(jìn)路徑：可從“邊緣系統(tǒng)到核心”逐步替換開始，積累經(jīng)驗(yàn)后向核心系統(tǒng)遷移。架構(gòu)上設(shè)計(jì)時(shí)即考慮混合部署、容器化和多租戶需求，長期向云原生演進(jìn)。高度兼容適配性高度兼容適配性傳統(tǒng)核心系統(tǒng)架構(gòu)痛點(diǎn)生態(tài)兼容性（Oracle/DB2）和運(yùn)維體系重構(gòu)當(dāng)前金融、電信等行業(yè)核心業(yè)務(wù)系統(tǒng)普遍采當(dāng)前金融、電信等行業(yè)核心業(yè)務(wù)系統(tǒng)普遍采用“大型機(jī)/小型機(jī)（IBM等）+商業(yè)數(shù)據(jù)庫的架構(gòu)。這種架構(gòu)雖然性能強(qiáng)勁，但存在成本高昂、核心技術(shù)受制于人、擴(kuò)展性差、安全風(fēng)險(xiǎn)等隱患。策略：分布式架構(gòu)轉(zhuǎn)型策略：分布式架構(gòu)轉(zhuǎn)型按照工信部指導(dǎo)，硬件不足軟件補(bǔ)，軟件不足架構(gòu)補(bǔ)，分布式架構(gòu)是解決核心業(yè)務(wù)的關(guān)鍵方式——一一02GoldenDB關(guān)鍵技術(shù)領(lǐng)先：六大核心能力支撐國外產(chǎn)品替代數(shù)據(jù)庫替代的核心技術(shù)指標(biāo)對比多次實(shí)測第一業(yè)界唯一分布式事務(wù)強(qiáng)一致性對應(yīng)用透明，邏輯無修改集中數(shù)據(jù)庫最大性能10倍以上無故障運(yùn)行5年+可用性超99.9999%DB2、Oracle、MySQL豐富工具集（遷移、比對等）云原生，容器化國有大行1800+節(jié)點(diǎn)數(shù)據(jù)庫替代的核心技術(shù)指標(biāo)對比多次實(shí)測第一業(yè)界唯一分布式事務(wù)強(qiáng)一致性對應(yīng)用透明，邏輯無修改集中數(shù)據(jù)庫最大性能10倍以上無故障運(yùn)行5年+可用性超99.9999%DB2、Oracle、MySQL豐富工具集（遷移、比對等）云原生，容器化國有大行1800+節(jié)點(diǎn)可視化運(yùn)維、一鍵巡檢提供完善的運(yùn)維開發(fā)接口性能（TPS）擴(kuò)展性可用性可靠性分布式數(shù)據(jù)庫第一品牌02不能慢——高性能：滿足關(guān)鍵行業(yè)未來發(fā)展存款核心TPCC證券交易信用卡核心1優(yōu)化的兩階段提交相比普通兩階段提交，流程更加簡化、資源開存款核心TPCC證券交易信用卡核心1240000TPS240萬+TPMC800W/S240000TPS240萬+TPMC800W/S中國移動(dòng)，6分片實(shí)現(xiàn)230萬+TPMC，性能線性擴(kuò)展率1.1銀聯(lián)數(shù)據(jù)，信用卡核心業(yè)務(wù)場景占比前98%的聯(lián)機(jī)交易測試，日終批處理兩小時(shí)內(nèi)完成，縮短50%國泰君安DA數(shù)據(jù)上場：規(guī)劃5000w用戶，共中國移動(dòng)，6分片實(shí)現(xiàn)230萬+TPMC，性能線性擴(kuò)展率1.1銀聯(lián)數(shù)據(jù)，信用卡核心業(yè)務(wù)場景占比前98%的聯(lián)機(jī)交易測試，日終批處理兩小時(shí)內(nèi)完成，縮短50%國泰君安DA數(shù)據(jù)上場：規(guī)劃5000w用戶，共19億條數(shù)據(jù)，4分鐘插入完畢，TPS約800w/s中信銀行30分片集群，采用私對私轉(zhuǎn)賬（20%）和明細(xì)查詢（80%）的混合交易場景通過對產(chǎn)品極致打磨、用最低的資源達(dá)到最高的性能，滿足客戶降本增效的要求通過對產(chǎn)品極致打磨、用最低的資源達(dá)到最高的性能，滿足客戶降本增效的要求橫向擴(kuò)展方面，在保證數(shù)據(jù)強(qiáng)一致的基礎(chǔ)上，GoldenDB整體性能損耗小于5%，遠(yuǎn)低于同類產(chǎn)品性能損耗率，幾乎近線性擴(kuò)展（中信銀行核心業(yè)務(wù)下移技術(shù)驗(yàn)證測試數(shù)據(jù)）單機(jī)TPCC達(dá)到5萬每秒02不能慢——高性能：HTAP能力兼顧多場景需求l當(dāng)計(jì)算節(jié)點(diǎn)分析判斷在線業(yè)務(wù)請求是OLAP類SQL時(shí)，由分析引擎Coordinator承擔(dān)復(fù)雜查詢、復(fù)雜分析的OLAP任務(wù)，分發(fā)給相應(yīng)的數(shù)據(jù)節(jié)點(diǎn)。在線在線TP&AP業(yè)務(wù)離線數(shù)據(jù)分析業(yè)務(wù)分析型計(jì)算節(jié)點(diǎn)交易型計(jì)算節(jié)點(diǎn)分析型計(jì)算節(jié)點(diǎn)AP流GTM集群CoordinatorCoordinatorGTM集群CoordinatorCoordinator計(jì)算節(jié)點(diǎn)計(jì)算節(jié)點(diǎn)發(fā)APTPAPWorker+數(shù)據(jù)節(jié)點(diǎn)Worker+數(shù)據(jù)節(jié)點(diǎn)Worker+數(shù)據(jù)節(jié)點(diǎn)Worker+數(shù)據(jù)節(jié)點(diǎn)Worker+數(shù)據(jù)節(jié)點(diǎn)Worker+數(shù)據(jù)節(jié)點(diǎn)Worker+數(shù)據(jù)節(jié)點(diǎn)GoldenDB管理集群02不能錯(cuò)——數(shù)據(jù)一致性：滿足金融要求的分布式事務(wù)一致性gTransl分布式架構(gòu)下，如何保證分布式事務(wù)的ACIDl如何在多分片的分布式強(qiáng)事務(wù)一致下，保證系統(tǒng)高性能和水平擴(kuò)充能力l引入全局事務(wù)管理器GTM來保證全局分布式事務(wù)強(qiáng)一致性A=100l采用樂觀鎖與悲觀鎖混合處理機(jī)制來實(shí)現(xiàn)分布式事務(wù)和系統(tǒng)性能及水平擴(kuò)充能力的平A=100衡l業(yè)界唯一實(shí)現(xiàn)分布式事務(wù)強(qiáng)一致性，l事務(wù)控制流程優(yōu)化，提升性能02不能錯(cuò)——數(shù)據(jù)一致性：全局一致的備份恢復(fù)gReplic數(shù)據(jù)分片1數(shù)據(jù)分片2數(shù)據(jù)分片nOMM管理臺增量備份增量備份實(shí)時(shí)備份事務(wù)日志，數(shù)據(jù)可恢復(fù)到任意時(shí)間點(diǎn)。同步備份全局狀態(tài)信息，用該信息將數(shù)據(jù)恢復(fù)到全局一致狀態(tài)。l分布式架構(gòu)下，跨分片數(shù)據(jù)備份如何實(shí)現(xiàn)一致性l無需人工核對，實(shí)現(xiàn)備份數(shù)據(jù)核對l全局活躍事務(wù)列表設(shè)計(jì)l數(shù)據(jù)可以恢復(fù)到任意時(shí)刻并實(shí)時(shí)一致l策略可配：全量備份、增量備份、定時(shí)備份、實(shí)時(shí)備份l任務(wù)可視化管理，與第三方工具集成02不能丟——數(shù)據(jù)高可用：高效可靠的數(shù)據(jù)同步技術(shù)-gSyncFollower_1SQLthreadServiceEnginereplaywriteDataChangethreadSQLFollower_n--一一"replaywriteFollower_1SQLthreadServiceEnginereplaywriteDataChangethreadSQLFollower_n--一一"replaywrite,',',' ,' ,'committhread性能（性能（tpmc）并發(fā)數(shù)16000014000012000010000080000600004000020000l全節(jié)點(diǎn)同步：耗時(shí)長，用戶體驗(yàn)差l數(shù)據(jù)高可靠與服務(wù)高可用如何選擇l主備節(jié)點(diǎn)分組管理，減少響應(yīng)數(shù)量l靈活可配置的響應(yīng)策略gSyncTPCC性能MySQLGoldenDB100200300400500600800100012001400160018002000l組響應(yīng)策略，數(shù)據(jù)不丟失，分組間RPO=0l異常情況下，高可用策略兼顧可用性和一致性l最大保護(hù)策略：所有分組均需返回響應(yīng)l最高性能策略：無需分組響應(yīng)l最高可用策略：分組響應(yīng)大于所配置最小分組響應(yīng)數(shù)量02不能丟——應(yīng)對各種復(fù)雜場景：靈活智能的數(shù)據(jù)可用性策略-gTank分片同城機(jī)房(B)分片生產(chǎn)機(jī)房(A)分片異地機(jī)房(C)備分片同城機(jī)房(B)分片生產(chǎn)機(jī)房(A)分片異地機(jī)房(C)備主備備team1team2team3備 l最高可用策略：分組響應(yīng)大于所配置最小分組響應(yīng)數(shù)量用戶需求模式分組響應(yīng)=2分組響應(yīng)=1分組響應(yīng)=0數(shù)據(jù)很重要，一定不能丟數(shù)據(jù)高水位=2低水位=1數(shù)據(jù)庫運(yùn)行正常產(chǎn)生告警，數(shù)據(jù)庫提供讀寫服務(wù)產(chǎn)生告警，數(shù)據(jù)庫僅提供只讀服務(wù)一定不能停服務(wù)高水位=2低水位=0數(shù)據(jù)庫運(yùn)行正常產(chǎn)生告警，數(shù)據(jù)庫提供讀寫服務(wù)產(chǎn)生告警，數(shù)據(jù)庫提供讀寫服務(wù)l全節(jié)點(diǎn)同步：耗時(shí)長，用戶體驗(yàn)差l數(shù)據(jù)高可靠與服務(wù)高可用如何選擇l主備節(jié)點(diǎn)分組管理，減少響應(yīng)數(shù)量l靈活可配置的響應(yīng)策略l組響應(yīng)策略，數(shù)據(jù)不丟失，分組間RPO=0l異常情況下，高可用策略兼顧可用性和一致性l最大保護(hù)策略：所有分組均需返回響應(yīng)l最高性能策略：無需分組響應(yīng)02不能?！呖煽浚航鹑诩墐傻厝行谋Ｕ蠑?shù)據(jù)高可靠同城機(jī)房(B)APPAPP…l同城之間如何實(shí)現(xiàn)RPO…l同城之間如何實(shí)現(xiàn)RPO=0l如何做到嚴(yán)格的切換流程l滿足行業(yè)數(shù)據(jù)中心監(jiān)管要求l獨(dú)創(chuàng)同步機(jī)制保證同城RPO=0l具備數(shù)據(jù)庫同城雙活能力l優(yōu)先本地機(jī)房切換、再同城切換、再異地切換，相比自動(dòng)選主切換，邏輯更嚴(yán)謹(jǐn)，更符合金融行業(yè)特點(diǎn)l可視化運(yùn)維管理本地機(jī)房(A)APP智能DNSLoadBalance本地機(jī)房(A)APP智能DNSLoadBalanceAPP……智能DNSLoadBalance智能DNSAPP……智能DNSLoadBalance智能DNSLoadBalance計(jì)算節(jié)點(diǎn)集群GTM從從計(jì)算節(jié)點(diǎn)集群計(jì)算節(jié)點(diǎn)集群GTM從從計(jì)算節(jié)點(diǎn)集群計(jì)算節(jié)點(diǎn)集群Group2Team2從從管理節(jié)點(diǎn)從從管理節(jié)點(diǎn)從從管理節(jié)點(diǎn)主從GTM主從GTMdb從從…Group1Team2管理節(jié)點(diǎn)從從管理節(jié)點(diǎn)主從GTM主從GTMdb從從…Group2TeamGroup2Team3從從Group2Team1主從Group1Team1主Group2Team1主從Group1Team1主從……Group1Team3從從高低水位（優(yōu)化的分組數(shù)據(jù)同步技術(shù)，解決了數(shù)據(jù)中心間網(wǎng)絡(luò)不穩(wěn)定及可能產(chǎn)生的數(shù)據(jù)腦裂風(fēng)險(xiǎn)）02高兼容：實(shí)現(xiàn)異構(gòu)數(shù)據(jù)庫的平滑遷移數(shù)據(jù)對象JSON函數(shù)等Oracle函數(shù)法兼容>99%全面支持Oracle數(shù)據(jù)類型包含rowid、xmltype等類型數(shù)據(jù)類型支持DDL、數(shù)據(jù)類型、基本語法、連接法兼容>99%全面支持Oracle數(shù)據(jù)類型包含rowid、xmltype等類型數(shù)據(jù)類型接口適配語句接口適配語句支持PRO*C和OCI接口支持支持PRO*C和OCI接口支持ODBC、JDBC高度兼容DB2、Oracle,完全兼容MySQL02高兼容：完善的遷移工具集——覆蓋用戶遷移全流程圖形化開發(fā)組工具④圖形化開發(fā)組工具智能運(yùn)維平臺信息采集對象轉(zhuǎn)換信息采集對象轉(zhuǎn)換兼容性分析估報(bào)告②Sloth遷移同步平臺⑥②Sloth遷移同步平臺⑥GoldenDB備份工具軟件業(yè)務(wù)AP大模型數(shù)據(jù)反向全量大模型數(shù)據(jù)反向全量結(jié)構(gòu)增量義分析業(yè)務(wù)AP③DBReplay仿真回放AI語大模型AI語大模型義分析完善的全流程遷移工具集02高兼容：同各種軟硬件兼容，同各應(yīng)用廠商系統(tǒng)適配英方新炬迪思杰云和恩墨業(yè)務(wù)類/數(shù)據(jù)類/渠道類/管理類應(yīng)用英方新炬迪思杰云和恩墨神州信息中電金信長亮科技宇信科技高陽金信贊同科技同方軟銀天陽科技江融信安碩信息迪思杰恒生電子電訊盈科天華星航中安數(shù)聯(lián)愛捷軟件京東科技金蝶天燕建信金科頂點(diǎn)軟件科藍(lán)軟件高偉達(dá)天陽科技信雅達(dá)慧點(diǎn)科技安恒信息藍(lán)天信息愛數(shù)科技博睿數(shù)據(jù)河北移動(dòng)泛微網(wǎng)絡(luò)南京樹安兆尹科技安御道合云信達(dá)諾諾網(wǎng)絡(luò)金仕達(dá)鼎甲科技中匯億達(dá)用友金融西力科技帆軟軟件凡泰極客新數(shù)科技上海上訊昂楷科技晨行科技贏時(shí)勝華青融天壹進(jìn)制嘉為藍(lán)鯨普元信息西駿數(shù)據(jù)凱美瑞德合明軟件邦盛科技龍盈智達(dá)英方軟件安御道合拓敏信息奇安信中科金財(cái)亙巖網(wǎng)絡(luò)逐風(fēng)科技銀拓科技凱美瑞得北京科藍(lán)景堯科技得力助手合芯科技閃捷信息景堯科技安證通華銳科技容聯(lián)云新炬網(wǎng)絡(luò)領(lǐng)雁科技安鈦飛云新信息先進(jìn)數(shù)通智算信息彩訊股份弘積信息運(yùn)通科金中投創(chuàng)展威富通奧思網(wǎng)絡(luò)廣州云臻先特網(wǎng)絡(luò)實(shí)在智能睿智融科金證股份睿智合創(chuàng)鴻數(shù)科技遠(yuǎn)碩科技薄冰網(wǎng)絡(luò)信安世紀(jì)云宏信息九科信息云杉世紀(jì)思斐軟件雅拓信息中關(guān)村科金優(yōu)特捷信息杭州飛致云金融壹賬通深圳木浪云小愛機(jī)器人廣州思邁特服務(wù)類服務(wù)類服務(wù)器服務(wù)器操作系統(tǒng)芯片中間件/應(yīng)用框架龍芯、飛騰、兆芯、鯤鵬、海光、龍芯、飛騰、兆芯、鯤鵬、海光、浪潮、浪超、寶德、曙光、卓怡恒通、聯(lián)想、中興、天固信安、云海麒麟統(tǒng)信UOS、麒麟軟件、中興新支點(diǎn)、凝思、深度、中科方德、SUSE、Redhat寶蘭德、山東中創(chuàng)、領(lǐng)域、東方通、億信華辰、沃信已與1200+主流上下游軟硬件完成適配認(rèn)證，并以全棧開放方案在多個(gè)項(xiàng)目投產(chǎn)商用02云原生：支持多租戶與業(yè)務(wù)容器化部署?融合：采用專用存儲服務(wù)器，集成軟件定義存儲、虛擬化、輕量級SDN、安全等軟件，實(shí)現(xiàn)計(jì)算、存儲、網(wǎng)絡(luò)、安全的融合?彈性：通過增加節(jié)點(diǎn)，?融合：采用專用存儲服務(wù)器，集成軟件定義存儲、虛擬化、輕量級SDN、安全等軟件，實(shí)現(xiàn)計(jì)算、存儲、網(wǎng)絡(luò)、安全的融合?彈性：通過增加節(jié)點(diǎn)，即可快速實(shí)現(xiàn)容量性能彈性擴(kuò)展?可靠：計(jì)算集群高可用，存儲多副本、糾刪碼技術(shù)，保障系統(tǒng)安全可靠，支持跨機(jī)房/多地多中心部署?高效：環(huán)境標(biāo)準(zhǔn)化快速部署，支持全SSD以及SSD緩存+HDD模式，提供基于裸金屬、容器、虛擬化技術(shù)的實(shí)現(xiàn)方案?能效：計(jì)算成本節(jié)約40%，存儲成本節(jié)約30%，性能提升20%具恩HypervisorHypervisor實(shí)現(xiàn)快速部署，彈性擴(kuò)容，資源管控，租戶隔離，統(tǒng)一納管和智能運(yùn)維升級升級CNClusterCNCluster調(diào)度平臺理理備份恢修改備份恢修改釋放釋放出重分布...出存儲檢索處理存儲檢索處理AWR自定義告警自定義告警告警分析告警分析告警...平臺作為GoldenDB03GoldenDB核心案例豐富中國建設(shè)銀行中信銀行中信銀行銀聯(lián)數(shù)據(jù)贛州銀行貴州銀行代收付、個(gè)貸投產(chǎn)國家開發(fā)銀行啟動(dòng)GoldenDB信用卡核心賬務(wù)核心信用卡核心核心核心對私核心并網(wǎng)AK分布式核心國泰君安數(shù)據(jù)庫研發(fā)立項(xiàng)投產(chǎn)投產(chǎn)投產(chǎn)投產(chǎn)投產(chǎn)兩省投產(chǎn)投產(chǎn)核心投產(chǎn)200220142019.102020.052020.062020.102020.112021.122022.042022.082025.042024.092024.072024.052024.042024.042024.012023.112023.052023.03廣發(fā)銀行賬務(wù)核心投產(chǎn)中國光大銀行信用卡核心投產(chǎn)深圳農(nóng)商銀行存款系統(tǒng)投產(chǎn)浦發(fā)銀行廣發(fā)銀行賬務(wù)核心投產(chǎn)中國光大銀行信用卡核心投產(chǎn)深圳農(nóng)商銀行存款系統(tǒng)投產(chǎn)浦發(fā)銀行信用卡核心投產(chǎn)中國建設(shè)銀行海外核心投產(chǎn)中國民生銀行信用卡核心投產(chǎn)中國建設(shè)銀行對公核心投產(chǎn)中國工商銀行對公核心投產(chǎn)廣發(fā)銀行信用卡核心投產(chǎn)中國建設(shè)銀行全行對私核心投產(chǎn)………省農(nóng)信聯(lián)社及城商行&農(nóng)商行證券保險(xiǎn)運(yùn)營商國有大行&政策性銀行&股份制&大型金融機(jī)構(gòu)省農(nóng)信聯(lián)社及城商行&農(nóng)商行證券保險(xiǎn)運(yùn)營商03GoldenDB助力工商銀行完成超大規(guī)模容器云主機(jī)下移項(xiàng)目特點(diǎn)日均交易節(jié)點(diǎn)容器化部署日均交易節(jié)點(diǎn)容器化部署2024.4對公核心完成99%切流對公核心3支業(yè)務(wù)技術(shù)投產(chǎn)2023.6采用GoldenDB容器云版本GoldenDB啟動(dòng)工行采用GoldenDB容器云版本GoldenDB啟動(dòng)工行容器云版本研發(fā)IPVS項(xiàng)目啟動(dòng)I業(yè)務(wù)改造2021.3雙方啟動(dòng)創(chuàng)新合作2021.7IPVS項(xiàng)目啟動(dòng)I業(yè)務(wù)改造2021.3雙方啟動(dòng)創(chuàng)新合作2021.72021.62022.12啟動(dòng)切流2021.122019.12~2020.1GoldenDB發(fā)布2019.12~2020.12022.1容器云版本2022.1融合版本在CSI融合版本在CSI項(xiàng)目試點(diǎn)投產(chǎn)采用GoldenDB融合版本完成工行POC測試IPVS完成工行POC測試采用GoldenDB+信創(chuàng)服務(wù)器+信創(chuàng)操作系統(tǒng)全棧信創(chuàng)方案03GoldenDB助力建設(shè)銀行完成三核心下移??對私核心（青海、寧夏）并網(wǎng)?個(gè)貸業(yè)務(wù)（深圳、云南）并網(wǎng)??完成第一梯隊(duì)POC測試20207-8月?GoldenDB測試排名第一10月?代收付部分業(yè)務(wù)并網(wǎng)2021年11月?代收代付均完成全國投產(chǎn)2023年11月?對公核心整體投產(chǎn)2024年7月