知名IT互聯(lián)網(wǎng)公司都在使用哪些數(shù)據(jù)庫附全球最強數(shù)據(jù)庫大盤點_第1頁
知名IT互聯(lián)網(wǎng)公司都在使用哪些數(shù)據(jù)庫附全球最強數(shù)據(jù)庫大盤點_第2頁
知名IT互聯(lián)網(wǎng)公司都在使用哪些數(shù)據(jù)庫附全球最強數(shù)據(jù)庫大盤點_第3頁
知名IT互聯(lián)網(wǎng)公司都在使用哪些數(shù)據(jù)庫附全球最強數(shù)據(jù)庫大盤點_第4頁
知名IT互聯(lián)網(wǎng)公司都在使用哪些數(shù)據(jù)庫附全球最強數(shù)據(jù)庫大盤點_第5頁
全文預覽已結(jié)束

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)

文檔簡介

1、知名IT互聯(lián)網(wǎng)公司都在使用哪些數(shù)據(jù)庫(附全球最強數(shù)據(jù)庫大盤點)大數(shù)據(jù)已經(jīng)成為國家戰(zhàn)略,而大數(shù)據(jù)首先所面臨的問題 就是大數(shù)據(jù)的存儲問題,這就繞不開數(shù)據(jù)庫,因為數(shù)據(jù)庫就 是用來存儲數(shù)據(jù)的應用軟件。 任何數(shù)據(jù)庫,都有具優(yōu)缺點,無 論是傳統(tǒng)關(guān)系型數(shù)據(jù)庫還是 NoSQL數(shù)據(jù)庫又或者NewSQL 數(shù)據(jù)庫。因此,到底選擇哪個數(shù)據(jù)庫,對企業(yè)而言這個決策 過程都非常復雜。就數(shù)據(jù)庫實際應用水平而言,互聯(lián)網(wǎng)公司顯然走在了前列, 它們都在使用哪些數(shù)據(jù)庫 ?分別對應哪些業(yè)務(wù)場景,為什么 會是這樣選擇?了解的人卻并不多。阿里巴巴 /螞蟻金服阿里 巴巴/螞蟻金服主要使用兩種關(guān)系數(shù)據(jù)庫:OceanBase和MySQL o數(shù)據(jù)

2、規(guī)模:MySQL單臺機器TB級,OceanBase 單個集群從幾個 TB到幾百個TB皆有。MySQL :螞蟻金服 部分非核心業(yè)務(wù)和阿里巴巴大部分系統(tǒng),類似于其他互聯(lián)網(wǎng) 公司。去哪兒采訪對象:周彥偉,去哪兒網(wǎng)數(shù)據(jù)庫總監(jiān),負 責數(shù)據(jù)庫平臺的管理和維護工作。工作范圍包括MySQL ,Redis , HBase平臺的架構(gòu)設(shè)計,性能調(diào)優(yōu),日常運維以及 自動化運維平臺設(shè)計。周彥偉:去哪兒使用 MySQL支撐公 司大部分OLTP業(yè)務(wù),有上千臺規(guī)模。同時針對熱點數(shù)據(jù)以 及對訪問延時特別敏感的業(yè)務(wù),去哪兒大規(guī)模的使用Redis做緩存。對于數(shù)據(jù)量非常大,又不不利于分庫分表的數(shù)據(jù), 去哪兒選擇性的使用 HBase。

3、騰訊采訪對象:王懂道,騰訊 社交網(wǎng)絡(luò)運營部平臺技術(shù)運營中心,負責騰訊社交網(wǎng)絡(luò)海量 存儲集群的運維和優(yōu)化,服務(wù)對象包括QQ空間,相冊,微云,QQ音樂等。騰訊社交網(wǎng)絡(luò)主要使用深度定制MySQL數(shù)據(jù)庫+自研NoSQL ,規(guī)模萬臺以上服務(wù)器,千萬級 qps 2011年實現(xiàn)了以MySQL為基礎(chǔ)的CDB關(guān)系型存儲集群, 這是目前騰訊社交網(wǎng)絡(luò)最常用的關(guān)系數(shù)據(jù)庫集群,存儲如 QQ秀的用戶物品列表,黃鉆用戶數(shù)據(jù)等對事務(wù)依賴的服務(wù)。 CDB提供對前端透明的主備切換,一鍵擴容,快速回檔能力。隨著互聯(lián)網(wǎng)高速發(fā)展,尤其是社交應用的爆發(fā)式增長,傳統(tǒng) 的關(guān)系數(shù)據(jù)庫存在擴展能力薄弱,性能滿足不了業(yè)務(wù)需求的 問題,2011年騰

4、訊又自研了 CMEM這種純內(nèi)存高性能 NoSQL存儲集群,現(xiàn)在如空間的贊計數(shù),每秒高達數(shù)百萬 的訪問量,就使用這種存儲。百度外賣百度外賣目前線上主 要使用Mysql、redis等數(shù)據(jù)庫。MySQL數(shù)據(jù)數(shù)百TB級, redis數(shù)據(jù)幾TB級。Mysql主要用在訂單、支付、結(jié)算等業(yè) 務(wù)場景。這些業(yè)務(wù):1)對于數(shù)據(jù)庫的穩(wěn)定性要求高,需要數(shù) 據(jù)持久化存儲2)存儲空間的需求也比較大,數(shù)據(jù)量在幾十TB、幾百TB級別3)對于事務(wù)有強烈需求, 需要保證事務(wù)的 ACID特性4)讀寫量大,需要數(shù)據(jù)庫性能優(yōu)良,可擴展性好, 能集群化提供服務(wù)。對于上面這些需求,Mysql都可以很好的滿足,因此選擇 Mysql作為存儲。

5、Redis主要用在緩存、 計數(shù)的業(yè)務(wù)場景。這些業(yè)務(wù)有的對于讀取QPS非常高,可以達到每秒幾萬QPS ,有的更新非常頻繁,對于數(shù)據(jù)類型支 持的要求比較豐富,因此選擇redis作為存儲。魅族目前魅族OLTP場景主要使用的是 MySQL ,緩存服務(wù)使用的是 Redis。數(shù)據(jù)庫實例近1000,數(shù)據(jù)大小100T+, redis實例 1000+MySQL 使用覆蓋應用中心, 游戲中心,用戶中心,云 服務(wù)等主要業(yè)務(wù),之所以選擇 MySQL,主要是開源,無linsen 費用,而且擴展性好,如云服務(wù),隨著用戶數(shù)的不斷增加, 數(shù)據(jù)量也不斷的增加,最開始只有幾臺DB服務(wù)器,數(shù)據(jù)量的不斷增加,即使采用商業(yè)數(shù)據(jù)庫產(chǎn)品也

6、無法很好的支撐數(shù) 據(jù)的快快速增長,而MySQL擴展性好的優(yōu)勢就體現(xiàn)由來了, 利用復制架構(gòu)能快速的對單臺服務(wù)器容量進行拆分,到目前 為止僅云服務(wù)就已經(jīng)從最開始的幾組服務(wù)器增加到好幾十 組DB服務(wù)器。而且從最開始的不斷拆分模式演變?yōu)橹灰?加機器即可滿足數(shù)據(jù)量的快速增長。同時MySQL slave復制 能很好的擴展讀性能,跨機房冗災,比如三大中心業(yè)務(wù)需要 災各個機房進行讀擴展,利用slave復制就能很好的滿足要求,基于復制做跨機房的冗災也是一個不錯的選擇。附:全球最強數(shù)據(jù)庫大盤點DB-Engines 2017-01 數(shù)據(jù)庫前20名列表DB-Engines這個排名在業(yè)界引用得非常多,權(quán)威性也很高,總

7、體來說比較客觀,它不像很多咨詢機構(gòu)采用市場調(diào) 查,或者莫個數(shù)據(jù)庫廠商發(fā)布的數(shù)據(jù),而是通過以下6個方面的統(tǒng)計數(shù)據(jù)來綜合評估各個數(shù)據(jù)庫產(chǎn)品得分并給由綜合 排名: 1)數(shù)據(jù)庫相關(guān)網(wǎng)站數(shù)量(當前通過google、bing、 yandex搜索引擎統(tǒng)計)2)公眾關(guān)注度(通過Googletrends計算)3)技術(shù)討論活躍度(通過Stack Overflow 、DBA Stack Exchange 問答及用戶統(tǒng)計)4)招聘職位(通過Indeed、Simply Hired 統(tǒng)計)5)專業(yè)檔案(通過LinkedIn、Upwork統(tǒng)計)6)社交網(wǎng)絡(luò)信息(通過Twitter統(tǒng)計) DB-Engines這個方法我認為比

8、較科學,我個人也 比較喜歡用這種方式來快速分析事物活躍情況與趨勢。當然, 這個排名只是反應全球流行程度,不能反應由產(chǎn)品營收情況, 也不代表國內(nèi)流行度排名。下圖上各數(shù)據(jù)庫產(chǎn)品的競爭關(guān)系及客戶流向示意圖:各數(shù)據(jù)庫產(chǎn)品的競爭關(guān)系及客戶流向示意圖從排名來看 Oracle、MySQL、SQL Server三大數(shù)據(jù)庫產(chǎn)品 是絕對遙遙領(lǐng)先,呈三足鼎立局面。PostgreSQL、MongoDB 比較穩(wěn)的站在前五,得分也不相上下,兩家一直在爭奪老四 的位置。DB2曾經(jīng)是數(shù)據(jù)庫的領(lǐng)導者,但近幾年發(fā)展乏力, 在持續(xù)下滑,特別是互聯(lián)網(wǎng)行業(yè)及中小企業(yè)IT里基本沒有DB2的身影,在金融等領(lǐng)域也受到非常大的挑戰(zhàn),估計明年 老六的位置也危險。 MongoDB、Redis、Elasticsearch、Neo4j在自己的領(lǐng)域取得了領(lǐng)導地位??傮w來說,去年MySQL、SQLServer、Post

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責。
  • 6. 下載文件中如有侵權(quán)或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論