版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡介
個(gè)人閑置計(jì)算資源的利用(PICRU模式)隨著電子技術(shù)的發(fā)展,個(gè)人所擁有的電子設(shè)備具備了更強(qiáng)大的計(jì)算能力。然而,在個(gè)人計(jì)算能力趨于巨大化的同時(shí),這些設(shè)備的計(jì)算資源閑置問題也越顯尖銳。舉個(gè)例子,你很高興地買回來了一臺價(jià)值4000元的電腦,但事實(shí)上,你一天坐在電腦前的總時(shí)間可能不超過12個(gè)小時(shí)。也就是說,一天中有12個(gè)小時(shí)以上的時(shí)間你的電腦是被閑置的。亦即是說,當(dāng)你幾年后打算更換電腦而扔掉手中的電腦時(shí),你就白白扔掉了2000大洋。由此可見,海量計(jì)算資源的閑置,不僅是個(gè)人財(cái)產(chǎn)的一種浪費(fèi),更是巨大社會(huì)資源的流失!試想一下,如果我們能高效地利用起這部分閑置資源,情況將會(huì)變得怎么樣?這完全是可以實(shí)現(xiàn)的,我們把這種能把個(gè)人電腦的閑置計(jì)算資源進(jìn)行集中并加以利用的技術(shù)稱為PICRU(PersonalldleComputingResourcesUtilization)。運(yùn)用大數(shù)據(jù)處理中用到的MapReduce架構(gòu)的原理,我們可以把一個(gè)需要巨大計(jì)算力的數(shù)據(jù)任務(wù)合理地分成多個(gè)小份,再分配到多個(gè)專業(yè)服務(wù)器的CPU單元中進(jìn)行處理,從而實(shí)現(xiàn)更高效快速的運(yùn)算。而PICRU與MapReduce的最大區(qū)別就在于:個(gè)人計(jì)算機(jī)(PC)成為了大數(shù)據(jù)處理的參與者。對于那些愿意提供自己的計(jì)算機(jī)閑置資源的PC所有者來說,PICRU絕對是有好處的。我們可以通過返現(xiàn)的形式,幫助他們實(shí)現(xiàn)盈利,而他們幾乎不用花費(fèi)任何成本,他們要支付的只是電腦閑置出來的時(shí)間。也許他們在中午打了個(gè)盹、甚至是剛洗完一個(gè)熱水澡后,就會(huì)發(fā)現(xiàn)自己的銀行賬戶里又多了一筆"零花錢"。PICRU是一種對PC用戶、購買計(jì)算力的公司以及閑置資源集成者都能帶來利潤的模式。明確一下PICRU的-些特性:①PICRU旨在把數(shù)量龐大的個(gè)人電腦閑置計(jì)算資源進(jìn)行集中,并在統(tǒng)籌規(guī)劃后加以利用。PICRU只會(huì)利用PC處于閑置狀態(tài)時(shí)的計(jì)算資源。PICRU模式有三個(gè)參與者:PC用戶、購買計(jì)算力的公司以及閑置資源集成者。對PC用戶來說,新增的計(jì)算任務(wù)并不會(huì)給自己的電腦硬件帶來什么損害,相比之下,更值得令他們擔(dān)心的應(yīng)是閑置率帶來的損失。對于購買計(jì)算力的公司來說,PICRU能為他們剩下不少的數(shù)據(jù)分析經(jīng)費(fèi)。閑置資源集成者應(yīng)該掌握對用戶個(gè)人電腦的高度而規(guī)范的控制權(quán)限,同時(shí)自身也應(yīng)具有強(qiáng)大的自營服務(wù)器,以應(yīng)對計(jì)算資源暫時(shí)短缺的情況,保證PICRU系統(tǒng)的穩(wěn)定運(yùn)轉(zhuǎn)。PICRU模式公司A公司B公司C」1提供數(shù)據(jù)分析服務(wù)1購買計(jì)算力閑置資源集成 自營服務(wù)器提供閑置計(jì)算力 收集閑置計(jì)算資源,回饋利潤下面我們將著重討論P(yáng)ICRU模式在運(yùn)行過程中可能遇到的問題以及部分解決方案:數(shù)據(jù)安全性問題不管對PC用戶還是購買計(jì)算力的公司來說,數(shù)據(jù)的安全性將會(huì)是最關(guān)鍵的問題之一。PICRU的應(yīng)用將意味著會(huì)有大量的數(shù)據(jù)在世界各個(gè)角落間流動(dòng)。購買計(jì)算力的公司要把數(shù)據(jù)下放到素不相識的陌生人的電腦中,而PC用戶也要把自己電腦的最核心部分——CPU以及部分硬盤空間貢獻(xiàn)出去,數(shù)據(jù)的風(fēng)險(xiǎn)非常大,因此,在應(yīng)罔ICRU之前,必須升級數(shù)據(jù)加密技術(shù),并與PC用戶達(dá)成合法合理的嚴(yán)格的隱私保護(hù)協(xié)議。穩(wěn)定性問題由于不同PC終端其硬件配置水平可能存在極大的差異,因此在開始分配具體的計(jì)算任務(wù)前,非常有必要讓每臺獨(dú)立的PC進(jìn)行性能評估,如CPU評分、硬盤空間評分以及網(wǎng)速評分,從而使每臺PC都能分配到最合適的任務(wù),使其計(jì)算資源得到最充分合理的利用。當(dāng)然,閑置資源的集成者亦應(yīng)研發(fā)出先進(jìn)的調(diào)度程序和歸納程序,把待處理的數(shù)據(jù)更智能高效地分配到每個(gè)PC終端并從中回收結(jié)果。幸運(yùn)的是,大多數(shù)的數(shù)據(jù)處理場景都無需進(jìn)行并行數(shù)據(jù)的交互。每個(gè)數(shù)據(jù)處理節(jié)點(diǎn)只需專心地處理好分配給自己的那份任務(wù),而無需與其他節(jié)點(diǎn)進(jìn)行數(shù)據(jù)交流,這也預(yù)示著PICRU的可執(zhí)行性是非常強(qiáng)的。數(shù)據(jù)傳輸速度。在大數(shù)據(jù)的時(shí)代,假如不能解決數(shù)據(jù)傳輸速度的問題,把這么巨量的數(shù)據(jù)下放到PC端并回收結(jié)果這一過程將會(huì)令人抓狂。當(dāng)然假如我們有足夠多的PC終端,我們可以把待處理的海量數(shù)據(jù)盡量細(xì)分,從而減少每個(gè)PC端的傳輸量,提高傳輸效率。事實(shí)上,PICRU模式似乎違背的數(shù)據(jù)庫內(nèi)分析的原則(庫內(nèi)分析:讓數(shù)據(jù)在數(shù)據(jù)庫內(nèi)進(jìn)行分析,而不是把數(shù)據(jù)從數(shù)據(jù)庫中抽取到另一個(gè)分析環(huán)境中進(jìn)行分析。庫內(nèi)分析有利于大數(shù)據(jù)的運(yùn)用,提高數(shù)據(jù)處理速度\再加上PICRU的穩(wěn)定性與數(shù)據(jù)交互能力的限制,PICRU可能在大多數(shù)情況下只能用于數(shù)據(jù)分析前的數(shù)據(jù)準(zhǔn)備工作(在后面對PICRU應(yīng)用范圍的討論中將會(huì)詳細(xì)講這個(gè)問題)盡管把大量的數(shù)據(jù)進(jìn)行轉(zhuǎn)移似乎十分麻煩,但想想那些PC的潛在的2000元的價(jià)值,犧牲點(diǎn)速度也許是值得的,特別是對于那些對實(shí)時(shí)性要求不高的任務(wù)來說,通過PICRU進(jìn)行數(shù)據(jù)處理能給你省下一大筆成本。市場問題。PICRU是未來大數(shù)據(jù)處理的一種假象模式,現(xiàn)階段的應(yīng)用可能并不能顯示出其優(yōu)越性,這主要是因?yàn)槭艿搅耸袌龅闹萍s。當(dāng)今的大數(shù)據(jù)分析也只是處于起步階段,盡管發(fā)展迅速,但我們現(xiàn)有的各種超級計(jì)算機(jī)、服務(wù)器提供商還是能提供足夠多的計(jì)算資源來給有需要的公司進(jìn)行大數(shù)據(jù)處理。因此,PICRU的市場需求并不十分迫切,但當(dāng)中小型企業(yè)都開始使用大數(shù)據(jù)時(shí),人們就會(huì)深切體會(huì)到PICRU的強(qiáng)大魅力。具有PICRU市場部署能力的公司,一方面應(yīng)具有龐大PC用戶群以及強(qiáng)大的PC管理技術(shù),另一方面要有成熟的自營服務(wù)器。至此,你想到了哪些公司?沒錯(cuò)——奇虎360和IBM。聲稱擁有全國90%的PC裝機(jī)量的360,能夠快速把PICRU模式向大眾推廣開來,并獲得海量的PC終端;同時(shí)它作為一個(gè)與PC打交道的"電腦管家,管理PC閑置資源的工作只是小菜一碟。而IBM所擁有的強(qiáng)大服務(wù)器與大數(shù)據(jù)分析技術(shù),足以保證PICRU系統(tǒng)的穩(wěn)定運(yùn)行。因此,奇虎360可以嘗試與IBM合作,搞一下PICRU。PICRU的適用范圍:之前提到,由于PC環(huán)境的不穩(wěn)定性與網(wǎng)速的限制,PICRU現(xiàn)階段也許只能承擔(dān)一些數(shù)據(jù)分析前的數(shù)據(jù)準(zhǔn)備任務(wù)。大數(shù)據(jù)分析的流程大致可以分為數(shù)據(jù)的準(zhǔn)備工作以及數(shù)據(jù)分析工作。大數(shù)據(jù)分析所用到的數(shù)據(jù)源往往是半結(jié)構(gòu)化甚至是非結(jié)構(gòu)化的,要發(fā)掘出這些數(shù)據(jù)的價(jià)值,就必須先對這些雜亂無章的數(shù)據(jù)進(jìn)行篩選和提取,亦即是所說的數(shù)據(jù)準(zhǔn)備工作。值得強(qiáng)調(diào)的是,數(shù)據(jù)準(zhǔn)備工作是數(shù)據(jù)分析流程中最繁瑣的部分,復(fù)雜分析的主要困難都發(fā)生在數(shù)據(jù)處理階段,因此,把這一龐大工作量的工作放到高效廉價(jià)的PC端進(jìn)行,絕對是一個(gè)不錯(cuò)的選擇。而大型服務(wù)器的計(jì)算資源,應(yīng)留給分析模型的開發(fā)任務(wù)和數(shù)據(jù)分析工作,從而達(dá)到資源的高效利用。其次,PICRU多用于處理對實(shí)時(shí)性要求不強(qiáng)的任務(wù)。這里有一個(gè)實(shí)例——BOINC平臺。這個(gè)平臺是我在寫這篇文章的過程中在網(wǎng)上發(fā)現(xiàn)的,實(shí)在是太令人興奮了!與PICRU模式雷同,它旨在為各研究者提供匯集全球各地大量個(gè)人電腦的強(qiáng)大運(yùn)算能力。在志愿者加入了BOINC平臺上的計(jì)算項(xiàng)目后,BOINC客戶端程序?qū)⒆詣?dòng)下載新的任務(wù)單元,并調(diào)用相應(yīng)項(xiàng)目的計(jì)算程序進(jìn)行計(jì)算,在計(jì)算完成時(shí),它還將自動(dòng)地將計(jì)算結(jié)果上傳,并同時(shí)取得新的計(jì)算單元。比如說,"SETI計(jì)劃"是BOINC中的一個(gè)項(xiàng)目,它可以幫助科學(xué)家尋找地外生命。由于有太多的數(shù)據(jù)要分析,這幾乎是不可能完成的。好在這些要被分析的數(shù)據(jù)可以很容易的被分解成很多小的數(shù)據(jù)包,這些小的數(shù)據(jù)包可以同時(shí)被處理,因?yàn)樗鼈冎g是相互獨(dú)立的。BOINC程序能夠通過互聯(lián)網(wǎng)從網(wǎng)絡(luò)服務(wù)器上獲得一個(gè)數(shù)據(jù)包,PC將分析它并將結(jié)果返回給服務(wù)器。當(dāng)你需要用你的計(jì)算機(jī)進(jìn)行工作的時(shí)候,BOINC程序會(huì)立即暫停,只有在你完成工作而不使用計(jì)算機(jī)的時(shí)候才開始繼續(xù)進(jìn)行分析的工作。(以上關(guān)于BOINC的介紹摘自百度百科和百度知道)PS:有興趣的童鞋一定要下載BOINC玩一下,為了科學(xué),為了人類的未來!(注意:你貢獻(xiàn)給BOINC的計(jì)算資源都是志愿性質(zhì)的,不能得到任何經(jīng)濟(jì)收
益)大數(shù)據(jù)源都不會(huì)涉及到機(jī)密數(shù)據(jù)
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 江西省南昌市2025-2026學(xué)年上學(xué)期期末八年級數(shù)學(xué)試卷(含答案)
- 文綜試卷及答案
- 微積分試題及答案
- 地產(chǎn)委托物業(yè)前期介入相關(guān)工作作業(yè)指導(dǎo)書
- 腹腔鏡培訓(xùn)班理論考試試題
- 達(dá)人介紹教學(xué)
- 一年級數(shù)學(xué)上冊期中試卷及答案真題(三套)
- 解析卷-滬粵版八年級物理上冊第四章物質(zhì)的形態(tài)及其變化章節(jié)測評試卷(含答案詳解版)
- 大壩混凝土施工技術(shù)操作要領(lǐng)
- 2026屆北京市石景山區(qū)高三上學(xué)期期末考試歷史試題(含答案)
- 河南豫能控股股份有限公司及所管企業(yè)2026屆校園招聘127人筆試模擬試題及答案解析
- 要謙虛不要驕傲課件
- 2026國家保安員資格考試題庫及參考答案【完整版】
- 微生物檢驗(yàn)質(zhì)控措施分析
- 2026年黑龍江農(nóng)業(yè)工程職業(yè)學(xué)院單招職業(yè)技能考試題庫及參考答案詳解1套
- 婦科腫瘤保留生育功能治療策略
- 宮頸癌病理課件
- 2025東航股份綜合管理部招聘筆試歷年參考題庫附帶答案詳解
- 渝22TS02 市政排水管道附屬設(shè)施標(biāo)準(zhǔn)圖集 DJBT50-159
- 新一代大學(xué)英語(第二版)綜合教程1(智慧版) 課件 B1U1 iExplore 1
- 淮安市2022-2023學(xué)年七年級上學(xué)期期末道德與法治試題【帶答案】
評論
0/150
提交評論