版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報或認(rèn)領(lǐng)
文檔簡介
羅輝|OceanBase運營商行業(yè)高級解決方案架構(gòu)師OceanBase海揚數(shù)據(jù)庫大事記及架構(gòu)演進(jìn)HTAP混合引擎V3.0版本發(fā)布HTAP里程碑版本開放HTAP混合引擎V3.0版本發(fā)布HTAP里程碑版本開放300萬核心代碼原生分布式數(shù)據(jù)庫一體化產(chǎn)品分布式引擎V4.0版本業(yè)內(nèi)首次提出并實現(xiàn)單機分布式一體化架構(gòu)上線OBV4.0版本業(yè)內(nèi)首次提出并實現(xiàn)單機分布式一體化架構(gòu)上線OBCloud云數(shù)據(jù)庫公有云發(fā)布、走向海外深耕金融政企頭部核心場景,踐行中腰部規(guī)模化復(fù)制公有云上線,北美站點開服上架AWSMarketplaceV4.3版本實現(xiàn)近PB級秒級實時分析雙引擎戰(zhàn)略客戶數(shù)突破2000家金融行業(yè)本地部署第一公有云深耕新零售、互聯(lián)網(wǎng)、制造業(yè)打破世界記錄TPC-C6088萬tpmC登頂榜首打破世界記錄TPC-C6088萬tpmC登頂榜首TPC-C7.07億tpmc,打破自己保持的世界記錄,超V0.5版本單點故障下不丟失任何數(shù)據(jù)V0.5版本單點故障下不丟失任何數(shù)據(jù)第一次驗證分布式數(shù)據(jù)庫可負(fù)載關(guān)鍵業(yè)務(wù)系統(tǒng)“雙11”創(chuàng)造6100萬次/秒數(shù)據(jù)庫處理峰值記錄“雙11”創(chuàng)造6100萬次/秒數(shù)據(jù)庫處理峰值記錄V1.0版本規(guī)?;茝VTPC-H1526萬QphH@30000GB登頂榜首,成為全球唯一登頂V1.0版本規(guī)?;茝VTPC-H1526萬QphH@30000GB登頂榜首,成為全球唯一登頂TPC-C和TPC-H的分布式數(shù)據(jù)庫6月25日正式立項6月25日正式立項徹底解決水平擴展問題徹底解決水平擴展問題實現(xiàn)真正意義上的原生分布式數(shù)據(jù)庫獨立商業(yè)化OceanBase開始獨立商業(yè)化運作上線頭部客戶核心系統(tǒng)獨立商業(yè)化OceanBase開始獨立商業(yè)化運作上線頭部客戶核心系統(tǒng)試點海外客戶擴大使用范圍服務(wù)阿里巴巴集團(tuán)幾十?dāng)U大使用范圍服務(wù)阿里巴巴集團(tuán)幾十個電商平臺的業(yè)務(wù)系統(tǒng)上線支付寶核心賬務(wù)和支付系統(tǒng)V2.0版本從MySQL兼容性邁進(jìn)實現(xiàn)對Oracle的全面兼容V2.0版本從MySQL兼容性邁進(jìn)實現(xiàn)對Oracle的全面兼容多家金融客戶第一個用戶淘寶收藏夾多家金融客戶第一個用戶淘寶收藏夾完成螞蟻集團(tuán)核心系統(tǒng)最后一個Oracle核心升級南京銀行成為首家上線用戶支撐支付寶核心交易系統(tǒng)承擔(dān)“雙11”10%交易流量完成螞蟻集團(tuán)核心系統(tǒng)最后一個Oracle核心升級南京銀行成為首家上線用戶首批分布式數(shù)據(jù)庫通過“安全可靠測評”來源:首批分布式數(shù)據(jù)庫通過“安全可靠測評”來源:《IDCMarketScape:中國分布式關(guān)系型數(shù)據(jù)庫2023年廠商評估》來源:《來源:《IDC中國分布式事務(wù)數(shù)據(jù)庫市場追蹤,2024H2》墨天輪:OceanBase長期位居中來源:墨天輪中國數(shù)據(jù)庫流行度排行獲評Gartner亞太地區(qū)“客戶之選”同時位列全球“卓越表現(xiàn)者”來源:"獲評Gartner亞太地區(qū)“客戶之選”同時位列全球“卓越表現(xiàn)者”來源:"GartnerPeerInsightsVoiceoftheCustomerforCloudDatabaseManagementSystems"連續(xù)兩年入選Gartner魔力象限“榮譽提及”來源:《MagicQuadrantT為滿足現(xiàn)代數(shù)據(jù)架構(gòu)需求進(jìn)行創(chuàng)新突破單寫多讀架構(gòu)全分布式架構(gòu)單機分布式一體化架構(gòu)OceanBase4.3一個數(shù)據(jù)庫一個數(shù)據(jù)庫行存列存一體化一體化存儲推出全新的列存引擎行存、列存、行列混存基于一體化數(shù)據(jù)庫提供向量能力簡化AI技術(shù)棧一體化產(chǎn)品原生支持多種數(shù)據(jù)類型一體化產(chǎn)品一體化事務(wù)高性能單機事務(wù)+可擴展分布式事務(wù)一體化事務(wù)高性能單機事務(wù)+可擴展分布式事務(wù)一體化引擎向量化執(zhí)行引擎2.0一體化引擎雙語法支持+混合負(fù)載優(yōu)化器執(zhí)行器多云原生支持多基礎(chǔ)設(shè)施屏蔽不同云基礎(chǔ)設(shè)施差異,融于云生態(tài)多云原生支持多基礎(chǔ)設(shè)施屏蔽不同云基礎(chǔ)設(shè)施差異,融于云生態(tài)一體化架構(gòu)從單機到分布式,從分布式到單機一體化架構(gòu)靈活適應(yīng)業(yè)務(wù)從小規(guī)模到大規(guī)模的增長需求多工作負(fù)載一體化(TP+AP)通過一個數(shù)據(jù)庫實現(xiàn)TP&AP的融合,支持行存、列存及行列混存,能夠同時滿足聯(lián)機事務(wù)處理和實時分析工作負(fù)載的需求。消除復(fù)雜的ETL和冗余數(shù)據(jù),并提供資源隔離能力,避免對關(guān)鍵業(yè)務(wù)的干擾和額外存儲成本開銷。配備可處理復(fù)雜SQL的企業(yè)級優(yōu)化器,確保不同工作負(fù)載下始終保持卓越性能。一套系統(tǒng)支撐海量交易與實時分析HTAP(混合事務(wù)與實時分析處理)是行業(yè)的迫切需求。OceanBase基于原生分布式技術(shù),能夠在高效處理交易場景的同時,完成分析和批處理等分析性任務(wù)。通過一套引擎,OceanBase同時支持OLAP和OLTP工作負(fù)載,實現(xiàn)了兩套系統(tǒng)的功能,大幅降低了成本?;旌县?fù)載一站完成傳統(tǒng)方式OceanBase集群OceanBase集群異步傳輸異步傳輸OLAP請求OceanBase認(rèn)為,真正的HTAP要求首先具備高性能的OLTP,然后在OLTP的基礎(chǔ)上支持實時分析。OceanBase通過原生分布式技術(shù)提供高性能的OLTP能力,真正實現(xiàn)“一個系統(tǒng)”同時處理交易與實時分析,通過“一份數(shù)據(jù)”服務(wù)于不同工作負(fù)載,從根本上確保數(shù)據(jù)一致性,最大程度地多工作負(fù)載下的精細(xì)化資源隔離數(shù)據(jù)分析系統(tǒng)計算資源數(shù)據(jù)存儲在線交易系統(tǒng)在混合負(fù)載場景中,確保不同負(fù)載之間的性能和資源管理至關(guān)重要。OceanBase針對傳統(tǒng)數(shù)據(jù)庫在TP和AP負(fù)載下數(shù)據(jù)一致性挑戰(zhàn),提供多種資源隔離方式,包括使用多個Zone進(jìn)行物理隔離和CPU資源組隔離,滿足不同的資源需求。此外,系統(tǒng)還自動識別并隔離慢查詢,確保整體交易響應(yīng)時延不受影響,從而保障不同負(fù)載之間的穩(wěn)定性和性能。數(shù)據(jù)分析系統(tǒng)計算資源數(shù)據(jù)存儲在線交易系統(tǒng)面向關(guān)鍵業(yè)務(wù)負(fù)載的OLTPLTS版本4.2.5全面提升MySQL平滑遷移完善基礎(chǔ)功能EVENT對象支持定時任務(wù),LOCKTABLES表鎖,GET_LOCK全面提升MySQL平滑遷移完善基礎(chǔ)功能EVENT對象支持定時任務(wù),LOCKTABLES表鎖,GET_LOCK()用戶自定義鎖完善數(shù)據(jù)類型SERIAL類型,ASCII、TIS620、UTF8MB3字符集,GIS相關(guān)表達(dá)式,XML相關(guān)表達(dá)式,兼容MySQL非法日期完善系統(tǒng)視圖和變量全面兼容一批系統(tǒng)變量,兼容information_schema.optimizer_trace等一批視圖Oracle兼容性提升PL穩(wěn)定性和易用性PL編譯結(jié)果持久化,優(yōu)化重編譯場景,提供DBMS_UTILITY,DBMS_PROFILE提升可調(diào)試完善通信協(xié)議兼容COMSETOPTION,COMPROCESSINFO__等全部全部通信命令__完善語句選項兼容兼容showcreateuser,checktable等語句,兼容low_priority等選項三方生態(tài)適配通過兼容性提升,新增pt-archiver,goInception等29種MySQL三方工具適配提升兼容性PS協(xié)議支持PL出參,dblink調(diào)用遠(yuǎn)程UDFTP性能提升TP性能優(yōu)化相比4.2.1,sysbenchTP性能提升TP性能優(yōu)化相比4.2.1,sysbenchrw提升26%,batchinsert提升52%小規(guī)格性能優(yōu)化相比4.2.1,4C小規(guī)格sysbenchselect提升37%,insert提升53%OBKVOBKV-Redis新增OBKV-Redis低成本KV存儲服務(wù),兼容Redis協(xié)議,提供string,hash,list,set,zset提供高性能PUT接口,支持全局索引,通過組提交優(yōu)化性能,新增兼容HBase2.x接口OBKV增強可診斷性的里程碑系統(tǒng)細(xì)化監(jiān)控指標(biāo)新增標(biāo)準(zhǔn)時間模型統(tǒng)計指標(biāo),新增后臺可診斷性的里程碑系統(tǒng)細(xì)化監(jiān)控指標(biāo)新增標(biāo)準(zhǔn)時間模型統(tǒng)計指標(biāo),新增后臺算子、PX監(jiān)控優(yōu)化內(nèi)置性能診斷報告基于全面的監(jiān)控指標(biāo)和會話采樣,內(nèi)置全新的系統(tǒng)性能分析報告核心能力持續(xù)打磨計劃生成優(yōu)化大INLIST優(yōu)化,提升統(tǒng)計信息收集效率,支持統(tǒng)計信息拷貝,估行與統(tǒng)計信息增強,查詢改寫能力增強,計劃選擇優(yōu)化核心能力持續(xù)打磨計劃生成優(yōu)化大INLIST優(yōu)化,提升統(tǒng)計信息收集效率,支持統(tǒng)計信息拷貝,估行與統(tǒng)計信息增強,查詢改寫能力增強,計劃選擇優(yōu)化資源負(fù)載均衡完善存儲均衡考慮LOB和局部索引,遷移復(fù)制源端選擇策略優(yōu)化,提供手動管理日志流和TABLET的命令安全能力增強MySQL模式支持基于角色的權(quán)限管理,Oracle模式支持代理用戶,MySQL模式支持審計日志面向?qū)崟rAP場景的LTS版本4.3.5OceanBase4.3.5版本在向量融合查詢的關(guān)鍵能力上取得顯著突破。針對AP場景進(jìn)行大幅性能優(yōu)化,推出全新向量檢索功能,實現(xiàn)AP功能完備列存副本支持強隔離低成本的HTAP場景部署方式物化視圖支持行列混存,增量刷新,實時物化視圖,物化視圖自動改寫外表集成支持ParquetAP功能完備列存副本支持強隔離低成本的HTAP場景部署方式物化視圖支持行列混存,增量刷新,實時物化視圖,物化視圖自動改寫外表集成支持Parquet,壓縮文件,文件目錄自動刷新快速導(dǎo)入導(dǎo)出支持事務(wù)內(nèi)增量旁路導(dǎo)入,insertoverwrite表和分區(qū),selectintooutfile支持并行導(dǎo)出和按分區(qū)導(dǎo)出AP數(shù)據(jù)類型RoaringBitmap數(shù)據(jù)類型,Array數(shù)據(jù)類型及其處理函數(shù)異步SQL執(zhí)行支持SUBMITJOB一步執(zhí)行導(dǎo)入和數(shù)據(jù)加工SQL,JOB路由策略優(yōu)化AP性能提升OLAP性能優(yōu)化相比4.3.0,AP性能提升OLAP性能優(yōu)化相比4.3.0,TPC-H1T提升64%,TPC-DS1T提升36%寬表性能優(yōu)化相比4.3.0,ClickBenchhot-run提升49%,cold-run提升149%多模融合分析向量檢索基于向量檢索的多模態(tài)查詢,與全文索引、關(guān)系表二級索引,可融合使用文檔檢索支持JSON多模融合分析向量檢索基于向量檢索的多模態(tài)查詢,與全文索引、關(guān)系表二級索引,可融合使用文檔檢索支持JSON多值索引、JSON部分更新、JSON_ARRAY_APPEND等數(shù)據(jù)處理函數(shù)AP易用性AP參數(shù)模板白屏化、向?qū)竭x型OLAP、AP易用性AP參數(shù)模板白屏化、向?qū)竭x型OLAP、HTAP內(nèi)核參數(shù)模版,基礎(chǔ)用戶免參數(shù)調(diào)優(yōu)SQL診斷長SQL可使用實時SQLPlanMonitor及ODC工具觀察實時執(zhí)行進(jìn)度和資源消耗一體化能力持續(xù)打磨資源隔離支持全局前后臺任務(wù)CPU隔離,支持Query級資源組綁定高可用資源優(yōu)化網(wǎng)絡(luò)備庫性能優(yōu)化,只讀副本按一體化能力持續(xù)打磨資源隔離支持全局前后臺任務(wù)CPU隔離,支持Query級資源組綁定高可用資源優(yōu)化網(wǎng)絡(luò)備庫性能優(yōu)化,只讀副本按Region級聯(lián)復(fù)制,日志流并行復(fù)制提升容災(zāi)處理性能可靠性提升支持不拷貝數(shù)據(jù)的快速恢復(fù)模式,支持從備租戶克隆租戶通過一個引擎原生支持多種數(shù)據(jù)訪問模式,涵蓋SQL和NoSQLAPI,滿足多樣化數(shù)據(jù)模型的需求,簡化數(shù)據(jù)架構(gòu)。支持多種數(shù)據(jù)類型,包括鍵值、JSON、GIS、XML、全文索引和SQL查詢,并提供TableAPI,兼容HBase接口,確保在大規(guī)模數(shù)據(jù)存儲和高性能讀寫場景中,始終展現(xiàn)卓越的處理能力。統(tǒng)一數(shù)據(jù)訪問,簡化數(shù)據(jù)架構(gòu)OceanBase統(tǒng)一數(shù)據(jù)訪問,簡化數(shù)據(jù)架構(gòu)OceanBase的多模能力允許用戶通過一個數(shù)據(jù)庫系統(tǒng)管理鍵值、JSON、GIS、XML、全文索引和SQL查詢等多種數(shù)據(jù)類型。這種靈活性滿足多樣化的數(shù)據(jù)模型需求,能夠減少維護(hù)多個數(shù)據(jù)庫系統(tǒng)的復(fù)雜性和成本,簡化數(shù)據(jù)架構(gòu),降低系統(tǒng)復(fù)雜性,提升開發(fā)和運維效率,同時確保數(shù)據(jù)的一致性和安全性。高性能讀寫與大規(guī)模數(shù)據(jù)處理通過提供TableAPI兼容HBase接口,OceanBase確保在大規(guī)模數(shù)據(jù)存儲和高性能讀寫場景中,用戶能夠?qū)崿F(xiàn)高效的數(shù)據(jù)操作。這種設(shè)計使得OceanBase在處理大數(shù)據(jù)場景時,能夠保持卓越的性能,無論是在數(shù)據(jù)的寫入、查詢還是分析方面,能夠快速響應(yīng)各種應(yīng)用需求,提供強大的數(shù)據(jù)處理能力。 應(yīng)用 TableKV文檔Vector寬列OLTPOLAPHBaseAPISQL(HBaseAPISQL(MySQL/Oracle兼容)TableAPITables(行存、列存、行列混存)Tables(行存、列存、行列混存)支持JSON,GIS,Vector,Array等半結(jié)構(gòu)化數(shù)據(jù)單機Share-nothingShare-storage單機Share-nothingShare-storage分布式向量融合查詢一體化(SQL+AI)數(shù)據(jù)、文檔等)的混合查詢。通過向量融合查詢,企業(yè)可將AI能支持可擴展的復(fù)雜AI應(yīng)用。OceanBase在關(guān)系型數(shù)據(jù)庫基礎(chǔ)上新增向量檢索能力,支持向量數(shù)據(jù)類型、向量索引和基于向量索引的儲能力和對多模數(shù)據(jù)類型的支持,OceanBase提供更豐富的融合查詢能力,簡化AI應(yīng)用技術(shù)棧,加速RAG、智能推薦和多模態(tài)搜索等場景落地。用戶訪問層多模數(shù)據(jù)層檢索層索引層工具體系SQL多語言客戶端PythonSDK基礎(chǔ)類型JSONGISVectorHBaseRedis融合查詢并行執(zhí)行向量索引全文索引GIS空間索引多值索引二級索引事務(wù)高可用多分區(qū)水平擴展高效存儲彈性擴縮容讀寫分離ODCOMSOASOCPOMA備份恢復(fù)OceanBase提供向量存儲、向量索引以及embedding向量檢索能力,覆蓋從索引算法、距離計算、過濾能力到訪問接口的完整向量基礎(chǔ)功能。同時,通過分布式架構(gòu)、存儲優(yōu)化、高可用設(shè)計以及融合查詢等能力的擴展,OceanBase打造一體化的向量融合查詢能力,助力AI應(yīng)用在更多場景落地。索引算法距離計算ann-benchmarksGIST-960排名第一L1、L2、inner_product、Filter能力訪問接口支持向量、標(biāo)量&半結(jié)構(gòu)化類型混合過濾支持MySQL各種語言客戶端插件化生態(tài)支持支持外接向量索引庫,目前默認(rèn)適配VSAG適配Langchain以及提供數(shù)據(jù)遷移工具分布式存儲基于OceanBase水平擴展及多分區(qū)能力,支持海量向量數(shù)據(jù)存儲基于LOB能力,支持超過萬維向量存儲高可用融合查詢支持主備/跨機房/跨地索引算法距離計算ann-benchmarksGIST-960排名第一L1、L2、inner_product、Filter能力訪問接口支持向量、標(biāo)量&半結(jié)構(gòu)化類型混合過濾支持MySQL各種語言客戶端插件化生態(tài)支持支持外接向量索引庫,目前默認(rèn)適配VSAG適配Langchain以及提供數(shù)據(jù)遷移工具分布式存儲基于OceanBase水平擴展及多分區(qū)能力,支持海量向量數(shù)據(jù)存儲基于LOB能力,支持超過萬維向量存儲高可用融合查詢支持主備/跨機房/跨地域容災(zāi),即使是內(nèi)存HNSW索引,容災(zāi)切換后也能實時訪問支持向量索引、標(biāo)量索引以及半結(jié)構(gòu)化索引(多值索支持同時訪問多路索引事務(wù)性能分布式事務(wù)能力保證了向量數(shù)據(jù)的一致性和完整性企業(yè)級安全特性完善的工具體系身份鑒別和認(rèn)證、訪問控制、數(shù)據(jù)加密、監(jiān)控告警、安全審計ODC/OCP/OMA/OMSOceanBase不僅為AI應(yīng)用提供數(shù)據(jù)存儲用戶訪問層SQL多語言客戶端基于數(shù)據(jù)庫的AI思考:當(dāng)混合查詢成為新常態(tài)用戶訪問層SQL多語言客戶端基于數(shù)據(jù)庫的AI思考:當(dāng)混合查詢成為新常態(tài)推薦距離五百米以內(nèi),人均消費25元以下,評價4.5分以上,不用排隊的咖啡廳空間查詢關(guān)系過濾向量計算?select*fromobAgentwhere?stdistance推薦距離五百米以內(nèi),人均消費25元以下,評價4.5分以上,不用排隊的咖啡廳空間查詢關(guān)系過濾向量計算?select*fromobAgentwhere?stdistance(location,st_srid(point(@longitude,@latitude),4326),'metre')<@quer_distance?andscore>4.5andavgConsum<25andstoreType=咖啡廳'?orderby12_distance(teatureVec,@querv_embedding)approximatelimit20;Agent平臺智能知識庫AI應(yīng)用智能SQL改寫基礎(chǔ)類型JSONGISVectorHBase融合查詢并行執(zhí)行向量索引全文索引GIS空間索引多值索引事務(wù)高可用多分區(qū)水平擴展高效存儲彈性擴縮容ODCOMSOASOCPOMA多模數(shù)據(jù)層檢索層索引層工具體系二級索引讀寫分離備份恢復(fù)在線知識庫智能故障診斷AIAI應(yīng)用基礎(chǔ)能力大模型+數(shù)據(jù)庫一體機大模型+數(shù)據(jù)庫一體機基礎(chǔ)設(shè)施OceanBase攻堅運營商關(guān)鍵業(yè)務(wù)系統(tǒng)客戶在業(yè)務(wù)發(fā)展過程中,需要降低數(shù)據(jù)庫使用及運維成本,實現(xiàn)資源和人客戶在業(yè)務(wù)發(fā)展過程中,需要降低數(shù)據(jù)庫使用及運維成本,實現(xiàn)資源和人關(guān)鍵核心系統(tǒng)數(shù)據(jù)庫國產(chǎn)化升級整體流程 前期階段上線階段上線現(xiàn)狀梳理和驗證整體評估和規(guī)劃適配和測試性能驗證遷移演練上線割接現(xiàn)狀梳理和驗證整體評估和規(guī)劃適配和測試性能驗證遷移演練上線割接估全量增量方式、校驗方式、割接窗口安排、回應(yīng)用和數(shù)據(jù)庫耦高可用風(fēng)險資源規(guī)格和工作量評估規(guī)劃OceanBase在中國移動:助力江蘇移動核心CRM&BOSS數(shù)據(jù)庫國產(chǎn)升級??傳統(tǒng)訪問控制技術(shù)存在問題:互聯(lián)網(wǎng)業(yè)務(wù)高速發(fā)展,IT系統(tǒng)數(shù)據(jù)庫結(jié)構(gòu)的日益復(fù)雜,規(guī)模增大,用戶增多,傳統(tǒng)訪問控制技術(shù)存在的問題使得數(shù)據(jù)訪問權(quán)限的分配和管理越發(fā)困難;?存儲加密需求:數(shù)據(jù)存儲的介質(zhì)日益增多,黑客或者惡意攻擊者取得存儲介質(zhì)恢復(fù)數(shù)據(jù)的案例持續(xù)增多,數(shù)據(jù)存儲加密要求變得尤為重要;?數(shù)據(jù)安全難以保證:系統(tǒng)建設(shè)的指數(shù)式增長,導(dǎo)致數(shù)據(jù)存放的多樣化、場景化、分散化,國外數(shù)據(jù)庫產(chǎn)品易帶來數(shù)據(jù)泄露風(fēng)險;另一方面保障數(shù)據(jù)安全集中式架構(gòu)普遍使用主備技術(shù),但“自動容錯”和“不丟數(shù)據(jù)”無法兼得,遇到重大災(zāi)難時較難保證數(shù)據(jù)安全。?基于分布式架構(gòu)的數(shù)據(jù)庫高可用:OceanBase采用基于無共享(Shared-Nothing)的多副本架構(gòu),讓整個系統(tǒng)沒有任何單點故障,保證系統(tǒng)的持續(xù)可用。目前某省移動核心系統(tǒng)數(shù)據(jù)庫按照兩地三中心三副本部署,可以做到城市級故障RPO=0,RTO<30秒,達(dá)到國際標(biāo)準(zhǔn)災(zāi)難恢復(fù)能力最高級別6級。?硬件投入成本降低80%:原核心數(shù)據(jù)庫運行在高端小型機+高端存儲架構(gòu),初次購買成本超過X百萬,每年硬件運維成本超過X萬。替換后營業(yè)、核心記賬數(shù)據(jù)庫均采用多臺2路x86架構(gòu),通過橫向算力擴展?jié)M足業(yè)務(wù)性能要求,而硬件投入僅為原先的20%。?存儲成本明顯降低,直接經(jīng)濟效益達(dá)數(shù)千萬:OceanBase采用LSM-Tree存儲引擎,以及優(yōu)化編碼格式,在不影響性能前提下,能夠有效降低數(shù)據(jù)存儲空間;例如CRMDB庫在源端國外商業(yè)庫上存儲占10T空間,遷移到CRM1APP16級能力最高級別CRM1APP2OBProxy1OBProxy2OBProxy4OBProxy3硬件成本降低傳輸日志事務(wù)日志流傳輸日志zone1zone2IDC1數(shù)據(jù)備份IDC2CRM1APP16級能力最高級別CRM1APP2OBProxy1OBProxy2OBProxy4OBProxy3硬件成本降低傳輸日志事務(wù)日志流傳輸日志zone1zone2IDC1數(shù)據(jù)備份IDC2城市Azone3主集群zoneN備集群存儲空間降低城市B解決方案?以無錫同城兩機房為主中心,南京單機房為備中心,主集群三副本均具備讀寫能力,數(shù)據(jù)通過Paxos協(xié)議保持強同步;?備集群數(shù)據(jù)由主集群同步日志復(fù)制,同步機制選擇最大保護(hù)/最大性能/最大可用模式,備集群的數(shù)據(jù)副本數(shù)可選擇單副本、三副本;?按照業(yè)務(wù)租戶規(guī)劃Primary-Zone部署在無錫,部分只讀業(yè)務(wù)使用南京備庫。驅(qū)動通過域名方式訪問OBProxy,訪問策略可以為隨機、輪詢、權(quán)重方式。數(shù)據(jù)備份在無錫主機房落地提升恢復(fù)效率。2.安全靈活的DBaaS模式:在某省移動的整體架構(gòu)設(shè)計中,劃分了若干個中心生產(chǎn)集群,每個生產(chǎn)集群上按照不同業(yè)務(wù)系統(tǒng)對應(yīng)OceanBase的不同租戶,租戶間實現(xiàn)資源隔離,讓每個租戶的實例不感知其他實例的存在,并通過權(quán)限控制確保不同租戶數(shù)據(jù)的安全性,配合OceanBase數(shù)據(jù)庫強大的在線擴縮容特性,能夠提供安全、靈活的DBaaS模式。OceanBase在中國移動:助力河北移動核心CRM成功遷移至ARM服務(wù)器?算力無法橫向擴展。?算力無法橫向擴展。隨著數(shù)據(jù)量的增加,原有的傳統(tǒng)集中式數(shù)據(jù)庫在算力上無法實現(xiàn)橫向擴展,不能滿足未來業(yè)務(wù)系統(tǒng)對性能的要求,需要引入分布式數(shù)據(jù)庫解決算力動態(tài)擴容需求。?系統(tǒng)架構(gòu)亟待升級。系統(tǒng)架構(gòu)基于底層數(shù)據(jù)庫架構(gòu),要滿足未來5至10年的領(lǐng)先性,依靠數(shù)據(jù)庫特性,實現(xiàn)應(yīng)用云原生架構(gòu)升級。底層數(shù)據(jù)庫算力可根據(jù)業(yè)務(wù)系統(tǒng)動態(tài)實現(xiàn)擴縮容,保證系統(tǒng)的可擴展性,高效性、安全性要求。?內(nèi)部核心技術(shù)非自研風(fēng)險。河北移動積極探索系統(tǒng)架構(gòu)升級方案,以分布式數(shù)據(jù)庫為抓手,全面推動國產(chǎn)升級。?先進(jìn)架構(gòu)滿足未來5-10年發(fā)展需求:河北移動依托OceanBase的原生分布式架構(gòu),可節(jié)點橫向擴展、彈性擴縮容、多租戶管理、數(shù)據(jù)多副本強一致等特性,可快速推進(jìn)應(yīng)用云原生架構(gòu)升級,收獲系統(tǒng)長期的高可用、性能穩(wěn)定高效,至少滿足未來5至10年的業(yè)務(wù)發(fā)展需要。?形成標(biāo)準(zhǔn)化項目推廣復(fù)制:隨著河北移動核心營業(yè)系統(tǒng)(唐山)的順利上線,沉淀了一系列標(biāo)準(zhǔn)方案,使整個國產(chǎn)項目標(biāo)準(zhǔn)化、可復(fù)制化,加速推進(jìn)河北移動全域業(yè)務(wù)系統(tǒng)業(yè)務(wù)系統(tǒng)的國產(chǎn)升級落地。?各項成本明顯降低:受益于OceanBase高度兼容傳統(tǒng)集中式數(shù)據(jù)庫的特性,大大降低了項目初期關(guān)注的三個成本因素:應(yīng)用改造成本、硬件投入成本、運維成本。?培養(yǎng)核心技術(shù)骨干,形成人才梯隊:通過核心系統(tǒng)全棧國產(chǎn)升級,河北移動培養(yǎng)出一批國產(chǎn)技術(shù)骨干,特別是國產(chǎn)數(shù)據(jù)庫操作、管理和運維的人員,并形成人才梯隊,實現(xiàn)國產(chǎn)自主能力,并逐步推廣到全省。解決方案?借助集團(tuán)磐舟能力,有效解決數(shù)據(jù)庫國產(chǎn)過程中應(yīng)用代碼頻繁發(fā)布難題,代碼從上傳-編譯-鏡像打包,推送到磐基PaaS平臺,均通過可視化界面進(jìn)行操作,同時搭配流水線配置,實現(xiàn)全過程高效的可持續(xù)化自動運行。?第一階段完成應(yīng)用全棧+數(shù)據(jù)庫國產(chǎn)。依托該架構(gòu)及OceanBase數(shù)據(jù)庫機制,實現(xiàn)集群內(nèi)高可用能力。少數(shù)派服務(wù)器宕機、單副本不可用,集群均可正常對外部提供服務(wù),保證應(yīng)用系統(tǒng)穩(wěn)定運行。備集群除用于日常切換演練之外,還承擔(dān)部分業(yè)務(wù)流量、當(dāng)主庫故障后,備庫可承載全部業(yè)務(wù)流量,保障應(yīng)用系統(tǒng)穩(wěn)定運行。第一階段:應(yīng)用全棧+數(shù)據(jù)庫國產(chǎn)第二階段:核心營業(yè)系統(tǒng)數(shù)據(jù)庫遷移至ARM服務(wù)器?第二階段基于OceanBase數(shù)據(jù)庫容災(zāi)能力,通過在ARM服務(wù)器搭建容災(zāi)系統(tǒng)實現(xiàn)全自動無損數(shù)據(jù)復(fù)制,確保數(shù)據(jù)實時追平。割接時通過一鍵切換主備集群,實現(xiàn)核心營業(yè)系統(tǒng)數(shù)據(jù)庫由x86服務(wù)器遷移至ARM第一階段:應(yīng)用全棧+數(shù)據(jù)庫國產(chǎn)第二階段:核心營業(yè)系統(tǒng)數(shù)據(jù)庫遷移至ARM服務(wù)器先進(jìn)架構(gòu)存儲成本滿足未來發(fā)展需求存儲成本OceanBase在中國聯(lián)通:數(shù)百個業(yè)務(wù)應(yīng)用實現(xiàn)數(shù)據(jù)庫國產(chǎn)分布式升級業(yè)務(wù)需求和挑戰(zhàn)?國外數(shù)據(jù)庫無法滿足中國特色場景:業(yè)務(wù)需求和挑戰(zhàn)?國外數(shù)據(jù)庫無法滿足中國特色場景:傳統(tǒng)數(shù)據(jù)庫孕育于歐美市場,并不能很好地滿足中國聯(lián)通如此體量的數(shù)據(jù)管理需求。?現(xiàn)有數(shù)據(jù)庫無法穩(wěn)定經(jīng)受大流量突然沖擊:中國聯(lián)通核心支撐系統(tǒng)cBSS,它將CRM、Billing等BSS域的核心系統(tǒng)全部集中起來對數(shù)據(jù)庫的要求就是存儲量巨大,并發(fā)度非常高,還要有一定的可擴展性。?業(yè)務(wù)系統(tǒng)復(fù)雜改造難度高:數(shù)據(jù)庫產(chǎn)品的兼容性帶來的業(yè)務(wù)系統(tǒng)改造、語法和性能的不匹配,以及運維支撐問題。?DBA門檻降低:配套生態(tài)工具也支持SQL阻斷限流、連接自動查殺、鎖事務(wù)管理、索引分析、SQL建議、一鍵巡檢等運維能力。通過工具,降低DBA門檻。?成本顯著降低:用1/3的服務(wù)器就能夠支撐原本同等的業(yè)務(wù),這釋放了很多機器,整個系統(tǒng)的運營成本也明顯降低。賬務(wù)中心DRDS用戶中心Oracle11g客戶中心RDS訂單中心DRDS計費中心DRDS在線平臺DRDS營銷中心DRDS遷移業(yè)務(wù)應(yīng)用解決方案“兩地三中心五副本”部署異地災(zāi)備中心的數(shù)據(jù)庫集群可以在秒級內(nèi)完成節(jié)點的故障轉(zhuǎn)移,基于強同步機制的數(shù)據(jù)庫服務(wù)可以實現(xiàn)數(shù)據(jù)無丟失。基本上可以做到讓用戶無感,用戶重連之后便可立即使用。打造“CUDBforOB”分布式HTAP數(shù)據(jù)庫產(chǎn)品快速遷移自研MySQL賬務(wù)中心DRDS用戶中心Oracle11g客戶中心RDS訂單中心DRDS計費中心DRDS在線平臺DRDS營銷中心DRDS遷移業(yè)務(wù)應(yīng)用解決方案“兩地三中心五副本”部署異地災(zāi)備中心的數(shù)據(jù)庫集群可以在秒級內(nèi)完成節(jié)點的故障轉(zhuǎn)移,基于強同步機制的數(shù)據(jù)庫服務(wù)可以實現(xiàn)數(shù)據(jù)無丟失?;旧峡梢宰龅阶層脩魺o感,用戶重連之后便可立即使用。打造“CUDBforOB”分布式HTAP數(shù)據(jù)庫產(chǎn)品快速遷移
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 河南新高考真題試卷及答案
- 第七單元 第30課時 視圖與投影
- 初三單元歷史試卷及答案
- 課程培訓(xùn)學(xué)員合同范本
- 2025年生態(tài)環(huán)保部考試題及答案
- 正規(guī)的建筑合同范本
- 第九類綜合考試題及答案
- 遼寧高校招聘試題及答案
- 配件銷售年度合同范本
- 喚醒護(hù)理與家屬溝通
- 2025年汽車后市場服務(wù)連鎖經(jīng)營可行性研究報告
- 基于國家智慧教育云平臺的農(nóng)村小學(xué)科學(xué)實驗課創(chuàng)新教學(xué)模式實踐與反思教學(xué)研究課題報告
- 2026年電商活動策劃實戰(zhàn)培訓(xùn)課件
- 2026年全國煙花爆竹經(jīng)營單位主要負(fù)責(zé)人考試題庫(含答案)
- 防范非計劃性拔管
- 2025年考研政治《馬克思主義基本原理》模擬卷
- (新教材)部編人教版三年級上冊語文 第25課 手術(shù)臺就是陣地 教學(xué)課件
- 2026天津農(nóng)商銀行校園招聘考試歷年真題匯編附答案解析
- 2025重慶市環(huán)衛(wèi)集團(tuán)有限公司招聘27人筆試歷年參考題庫附帶答案詳解
- 鉆井安全操作規(guī)程
- 精密減速機行業(yè)發(fā)展現(xiàn)狀及趨勢預(yù)測報告2026-2032
評論
0/150
提交評論