宗岱Tair分布式KV系統(tǒng)課件_第1頁
宗岱Tair分布式KV系統(tǒng)課件_第2頁
宗岱Tair分布式KV系統(tǒng)課件_第3頁
宗岱Tair分布式KV系統(tǒng)課件_第4頁
宗岱Tair分布式KV系統(tǒng)課件_第5頁
已閱讀5頁,還剩16頁未讀, 繼續(xù)免費閱讀

下載本文檔

版權說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權,請進行舉報或認領

文檔簡介

1、Tair簡介現(xiàn)狀與應用案例Tair特性內(nèi)部架構Tair未來分布式Key/Value存儲非持久化持久化Tair是什么支持 Java、C/C+的客戶端支撐著淘寶絕大部分系統(tǒng)300+ 臺服務器,每臺能提供22GB(內(nèi)存) 的空間70億+的記錄每秒百萬級別的請求數(shù)1GB/s的數(shù)據(jù)流使用現(xiàn)狀應用案例loginbuydetailTairNamespace支持不同的數(shù)據(jù)使用相同的key而內(nèi)容不沖突Version有效的保護并發(fā)更新Expirekey的失效時間控制Counter服務器端的原子計數(shù)器集合數(shù)據(jù)格式支持將value視為一個集合,提供對集合中部分數(shù)據(jù)的讀寫接口特性get/put/deleteincr/d

2、ecrmget/mdeleteget_items/add_items/remove_itemsAPIClientABCDEMasterSlaveconfigserverdataserversheartbeat系統(tǒng)架構HA數(shù)據(jù)分布按負載分布按機架分布輕量級非傳統(tǒng)的中心節(jié)點configserver不可用,不會影響集群的服務便于用戶使用ConfigServer傳統(tǒng)的數(shù)據(jù)分布方法:將 key 的hash 值對機器數(shù)取模實現(xiàn)簡單在服務器數(shù)量發(fā)生變化時對原有分布沖擊很大對照表:將 key 的hash 值對一個固定數(shù)取模固定數(shù)范圍內(nèi)的每個值都與一個節(jié)點相對應一臺物理機器可以和多個值對應consistent

3、hash的一種變型數(shù)據(jù)分布兩個節(jié)點Bucket numberdatanode1192.168.100.12192.168.100.23192.168.100.14192.168.100.25192.168.100.16192.168.100.2新增一個節(jié)點Bucket numberdatanode1192.168.100.12192.168.100.23192.168.100.14192.168.100.25192.168.100.36192.168.100.3對照表客戶端在啟動的時候從configserver獲取對照表,并緩存在本地客戶端根據(jù)對照表完成路由請求對照表變化后?路由ConfigS

4、erverDataServerClientversionrequestrequesttableRequest Plug-insMdbKdbRequestResponseTairServerStorage EngineResponse Plug-insMigrateDuplicatorFdbRdbBdbDataServermdbrdbfdbkdbKyoto cabinetbdbBerkeley DB存儲引擎支持使用share memoryNamespace級別的容量配額Slab的動態(tài)平衡數(shù)據(jù)過期清理LRU的淘汰機制mdb特點HashmapSlab Listmdb內(nèi)存結構ConfigServer HA宕機對服務基本無影響可以配置的備份數(shù)數(shù)據(jù)在寫入主節(jié)點后,會異步同步到輔節(jié)點如果主節(jié)點不可用,則輔節(jié)點自動接管成為主節(jié)點安全的數(shù)據(jù)分布方式不同機架/機房自動復制當有節(jié)點不可用時,能自動復制數(shù)據(jù),保證數(shù)據(jù)的備份數(shù)Tair的容災商品中心Cache單備份雙機房登錄session全內(nèi)存雙備份雙機房交易快照持久化雙備份雙機房容災案例mdb22G內(nèi)存單臺QPS 25Wkdb6 * 300G SAS單臺QPS 800Tair的性能服務器端統(tǒng)計與監(jiān)控負載/容量/總條目數(shù)/訪問次數(shù)/命中率/驅逐次數(shù)客戶端統(tǒng)計與監(jiān)控訪問延時統(tǒng)計與監(jiān)控Tai

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
  • 4. 未經(jīng)權益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責。
  • 6. 下載文件中如有侵權或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論