2023學(xué)年完整公開課版安全模式_第1頁
2023學(xué)年完整公開課版安全模式_第2頁
2023學(xué)年完整公開課版安全模式_第3頁
2023學(xué)年完整公開課版安全模式_第4頁
2023學(xué)年完整公開課版安全模式_第5頁
已閱讀5頁,還剩6頁未讀, 繼續(xù)免費(fèi)閱讀

付費(fèi)下載

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報(bào)或認(rèn)領(lǐng)

文檔簡介

安全模式掌握hdfs的安全模式

安全模式是HDFS的一種工作狀態(tài),處于安全模式的狀態(tài)下,只向客戶端提供文件的只讀視圖,不接受對命名空間的修改;同時(shí)NameNode節(jié)點(diǎn)也不會(huì)進(jìn)行數(shù)據(jù)塊的復(fù)制或者刪除,如:副本的數(shù)量小于正常水平。安全模式介紹

處于安全模式的NameNode不會(huì)進(jìn)行數(shù)據(jù)塊的復(fù)制。NameNode從所有的DataNode接受心跳信號(hào)和塊狀態(tài)報(bào)告。塊狀態(tài)報(bào)告包括了某個(gè)DataNode所有的數(shù)據(jù)塊列表。每個(gè)數(shù)據(jù)塊都有一個(gè)指定的最小復(fù)本數(shù)。當(dāng)NameNode檢測確認(rèn)某個(gè)數(shù)據(jù)塊的副本數(shù)目達(dá)到最小值時(shí),該數(shù)據(jù)塊就會(huì)被認(rèn)為是副本安全的。在一定百分比(這個(gè)參數(shù)可以配置)的數(shù)據(jù)塊被NameNode檢測確認(rèn)是安全之后(加上一個(gè)額外的30秒等待時(shí)間),NameNode將退出安全模式狀態(tài)。接下來它會(huì)確定還有哪些數(shù)據(jù)塊的副本沒有達(dá)到指定數(shù)目,并將這些數(shù)據(jù)快復(fù)制到其他DataNode上。

安全模式介紹node.safemode.min.datanodes:離開安全模式的最小可用(alive)datanode數(shù)量要求,默認(rèn)為0.也就是即使所有datanode都不可用,仍然可以離開安全模式。node.replication.min:最小的文件block副本數(shù)量,默認(rèn)為1node.safemode.threshold-pct:副本數(shù)達(dá)到最小要求的block占系統(tǒng)總block數(shù)的百分比,當(dāng)實(shí)際比例超過該配置后,才能離開安全模式(但是還需要其他條件也滿足)安全模式相關(guān)的配置<property><name>dfs.safemode.threshold.pct</name><value>0.999f</value><description>指定應(yīng)有多少比例的數(shù)據(jù)塊滿足最小副本數(shù)要求,才退出安全模式。小于等于0意味不進(jìn)入安全模式,大于1意味一直處于安全模式。</description></property><property><name>ddfs.replication.min</name><value>2</value><description>最小副本數(shù),默認(rèn)為1</description></property><property><name>dfs.safemode.extension</name><value>30</value><description>指定系統(tǒng)退出安全模式時(shí)需要的延遲時(shí)間,默認(rèn)為30(秒)</description></property>安全模式相關(guān)的配置當(dāng)收到來自datanode的狀態(tài)報(bào)告后,namenode根據(jù)配置,確定:

1)可用的block占總數(shù)的比例。 2)可用的數(shù)據(jù)節(jié)點(diǎn)數(shù)量符合要求之后。離開安全模式安全模式相關(guān)命令:hadoopdfsadmin-safemodeleave

強(qiáng)制NameNode退出安全模式hadoopdfsadmin-safemodeenter

進(jìn)入安全模式hadoopdfsadmin-safemodeget

查看安全模式狀態(tài)hadoopdfsadmin-safemode

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

最新文檔

評(píng)論

0/150

提交評(píng)論