迎接AI挑戰(zhàn)：構(gòu)建下一代數(shù)據(jù)庫系統(tǒng)文檔型數(shù)據(jù)庫關(guān)系型數(shù)據(jù)庫?云原生存算分離的數(shù)據(jù)庫倉庫?云原生存算分離的數(shù)據(jù)庫倉庫，實(shí)現(xiàn)按需付費(fèi)?2012年成立，2020年上市紐交所。?文檔型數(shù)據(jù)庫具備高可用，易擴(kuò)展、靈活訪問?2009年發(fā)布第一穩(wěn)定版本1.0?功能全面、性能優(yōu)異、可靠性高?1979年發(fā)布第一個基于SQL的商用關(guān)系數(shù)據(jù)庫管理系統(tǒng)?Databricks以約10億美元的價格收購云原生數(shù)據(jù)庫初創(chuàng)企業(yè)Neon?科技領(lǐng)域投資公司Haveli15億美元收購NoSQL公司AI時代的數(shù)據(jù)管理新挑戰(zhàn)?AI時代的數(shù)據(jù)管理新挑戰(zhàn)?超大規(guī)模2028年全球數(shù)據(jù)量393.8ZB（IDC預(yù)測）?更新速度數(shù)據(jù)實(shí)時變化，模型重新訓(xùn)練成本高、滯后性強(qiáng)?多模態(tài)語義割裂（文本、圖像、語音擴(kuò)展效率低，毫秒級響應(yīng)難?存儲成本激增?高維向量計(jì)算復(fù)雜度飆升需“博古通今”又“瞬息萬變”。傳統(tǒng)重訓(xùn)練滯后且昂貴，需動態(tài)知識注入與高效向量數(shù)據(jù)庫支持，以應(yīng)對金融、醫(yī)療等行業(yè)實(shí)時需求。?數(shù)據(jù)時效性：外部知識庫需高效注入模型，避免信息延遲。?系統(tǒng)擴(kuò)展性：向量數(shù)據(jù)爆發(fā)式增長，要求數(shù)據(jù)庫具備彈性擴(kuò)展與高性能。?資源效率：實(shí)時更新對計(jì)算、存儲的優(yōu)化提出更高要求。大模型知識有“截至日期”n很長一段時間內(nèi)，ChatGPT知識截止于2021年9月，到2023年上半年實(shí)時性差距近2年文檔/語音/圖像/傳感器難關(guān)聯(lián)。CLIP等對齊技術(shù)不足，擴(kuò)展性差、響應(yīng)慢。亟需統(tǒng)一管理框架實(shí)現(xiàn)跨模實(shí)時查詢。?表征對齊不徹底：依賴CLIP等單點(diǎn)技術(shù)，缺乏統(tǒng)一數(shù)據(jù)管理框架。?系統(tǒng)能力不足：傳統(tǒng)數(shù)據(jù)庫無法兼顧語義對齊、擴(kuò)展性、實(shí)時性。大模型數(shù)據(jù)需求與隱私保護(hù)矛盾突出，開放環(huán)境需"可用不可見"技術(shù)，實(shí)時脫敏要求超越傳統(tǒng)加密能力，亟需新型安全系統(tǒng)。?技術(shù)局限：私有化部署僅緩解部分問題，公共場景仍存在隱患"數(shù)據(jù)可用不可見"技術(shù)尚未成熟?實(shí)時性挑戰(zhàn)：監(jiān)控等特殊數(shù)據(jù)需即時脫敏傳統(tǒng)批處理加密延遲高，難滿足實(shí)時需求崖山數(shù)據(jù)庫：構(gòu)建AI時代的數(shù)據(jù)基礎(chǔ)設(shè)施從底層理論到系統(tǒng)工程實(shí)現(xiàn)全鏈條創(chuàng)新。從零構(gòu)建，融合細(xì)粒度多版本并發(fā)、自適應(yīng)異步事務(wù)調(diào)度等創(chuàng)新技術(shù)，在數(shù)據(jù)處理規(guī)模、吞吐量及高可用性方面實(shí)現(xiàn)國際領(lǐng)先突破。BoundedEvaluationBoundedEvaluation資源受限計(jì)算理論突破TransactionScheduling:FromConflictstoRuntimeConflicts(SIGMOD)新型計(jì)算資源調(diào)度理論突破20132024-202120132024-201720232017LinkingentitiesacrossrelationsandgraphLinkingentitiesacrossrelationsandgraphs(TODS)跨模融合計(jì)算理論突破CCFA類近4年發(fā)表100+篇datawithpreprocessing(VLDB)CCFA類近4年發(fā)表100+篇奠定顛覆傳統(tǒng)復(fù)雜性的理論研究基礎(chǔ)崖山數(shù)據(jù)庫：構(gòu)建AI時代的數(shù)據(jù)基礎(chǔ)設(shè)施從底層理論到系統(tǒng)工程實(shí)現(xiàn)全鏈條創(chuàng)新。從零構(gòu)建，融合細(xì)粒度多版本并發(fā)、自適應(yīng)異步事務(wù)調(diào)度等創(chuàng)新技術(shù)，在數(shù)據(jù)處理規(guī)模、吞吐量及高可用性方面實(shí)現(xiàn)國際領(lǐng)先突破。崖山數(shù)據(jù)庫產(chǎn)品體系崖山共享集群架構(gòu)圖崖山共享集群以透明多寫、高性能、金融級高可用優(yōu)勢，構(gòu)建全場景1:1替代能力，助力核心系統(tǒng)平滑遷移崖山數(shù)據(jù)庫系統(tǒng)技術(shù)突破聚合內(nèi)存聚合內(nèi)存(GLS)，跨節(jié)點(diǎn)數(shù)據(jù)透明訪問7006004003007006004003002000618473473動態(tài)調(diào)度?動態(tài)調(diào)度?沖突事務(wù)智能并行，吞吐提升137%344透明故障切換TAF?自動接管故障實(shí)例?業(yè)務(wù)秒級恢復(fù)單節(jié)點(diǎn)單節(jié)點(diǎn)2節(jié)點(diǎn)3節(jié)點(diǎn)4節(jié)點(diǎn)*以上數(shù)據(jù)均來源于實(shí)驗(yàn)室測試關(guān)鍵業(yè)務(wù)系統(tǒng)“1:1替代方案”全國產(chǎn)環(huán)境下，崖山共享集群TPCC測試性能已經(jīng)達(dá)到非國產(chǎn)環(huán)境下國際主流數(shù)據(jù)庫的同等水平相同硬件配置下，YashanDB兩節(jié)點(diǎn)共享集群性能達(dá)300w以上，領(lǐng)先國際主流數(shù)據(jù)庫50%AI時代數(shù)據(jù)庫的范式重構(gòu)破解Volume挑戰(zhàn)：受限資源計(jì)算與近似計(jì)算資源受限計(jì)算理論曾獲英國皇家學(xué)會Wolfson研究成果獎，通信數(shù)據(jù)查詢實(shí)測提高25-10萬倍（5個數(shù)量級）n資源受限擴(kuò)展：設(shè)計(jì)SemanticIndex(SI)的屬性范圍篩選器構(gòu)建訪問約束，把大數(shù)據(jù)集變小，提高查詢效率。n分層向量索引優(yōu)化：設(shè)計(jì)精確采樣算法，構(gòu)建分層架構(gòu)，選擇適合高維數(shù)據(jù)的索引結(jié)構(gòu)。n保障精度：基于語義索引的近似相似性查詢計(jì)劃，低選擇性-精確比較&高選擇性-向量索引。把大數(shù)據(jù)變?。嘿Y源受限進(jìn)行近似收斂，確保不失真AI時代數(shù)據(jù)庫的范式重構(gòu)攻克Variety挑戰(zhàn)：多模態(tài)異構(gòu)數(shù)據(jù)跨模融合計(jì)算關(guān)系數(shù)據(jù)Json時序數(shù)據(jù)空間數(shù)據(jù)向量數(shù)據(jù)......理財公眾號1關(guān)注理財產(chǎn)品1理財公眾號n理財產(chǎn)品m理財公眾號1關(guān)注理財產(chǎn)品1理財公眾號n理財產(chǎn)品m......跨模查購買過品飛---------------------?Ada未知購買關(guān)系朋友購買過品飛---------------------?Ada未知購買關(guān)系朋友是否購買目標(biāo)產(chǎn)品？Ada是?跨關(guān)系數(shù)據(jù)與向量數(shù)據(jù)跨關(guān)系數(shù)據(jù)與向量數(shù)據(jù)AI時代數(shù)據(jù)庫的范式重構(gòu)遲避免跨線程沖突;相比傳統(tǒng)基于固定調(diào)度規(guī)則的方法，有效降低鎖等待時間，自適應(yīng)異步并行自動按速度分組,組內(nèi)和組間采用不同并相比傳統(tǒng)基于固定調(diào)度規(guī)則的方法，有效降低鎖等待時間，AI時代數(shù)據(jù)庫的范式重構(gòu)應(yīng)對Security挑戰(zhàn)：面向多源數(shù)據(jù)的輕量化隱私增強(qiáng)技術(shù)模態(tài)差異：視頻/文本需差異化加密合規(guī)復(fù)雜性：需同時滿足多區(qū)域法規(guī)新興技術(shù)風(fēng)險：跨模態(tài)檢索可能引入隱蔽泄露分層加密策略動態(tài)訪問控制支持可信執(zhí)行環(huán)境（TEE）的隱私保護(hù)跨模態(tài)計(jì)算輕量化隱私增強(qiáng)技術(shù)等崖山數(shù)據(jù)庫系統(tǒng)——國產(chǎn)基礎(chǔ)軟件的破局之路AI時代數(shù)據(jù)管理系統(tǒng)新挑戰(zhàn)?海量訓(xùn)練數(shù)據(jù)管理，大規(guī)模高維向量數(shù)據(jù)處理?高效索引增量更新，海量數(shù)據(jù)增量更新?多模態(tài)數(shù)據(jù)統(tǒng)一管理，異構(gòu)數(shù)據(jù)混合查詢?隱私計(jì)算與數(shù)據(jù)加密，數(shù)據(jù)全生命周期安全原創(chuàng)理論突破軟件系統(tǒng)研發(fā)原創(chuàng)理論突破軟件系統(tǒng)研發(fā)企業(yè)級核心數(shù)據(jù)庫！?深圳市政府投資：服務(wù)國家自主可控戰(zhàn)略、領(lǐng)跑前沿技術(shù)創(chuàng)新?強(qiáng)大的技術(shù)團(tuán)隊(duì)：500+人，