版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡介
pig的配置文件2pig的配置文件3pig的配置文件修改$PIG_HOME/conf/perties,增加如下內(nèi)容配置pig環(huán)境變量
4pig的配置文件交互式或批量請(qǐng)注意,Pig現(xiàn)在使用Hadoop的本地模式(而不是Pig本地本地模式)。參閱PigSetup了解更多示例。GruntShell-交互式mapreduce模式(因?yàn)閙apreduce模式是你不需要指定的默認(rèn)模式)5pig的配置文件$pig...-Connectingto...grunt>A=load'data';grunt>B=...;GruntShell-批處理,本地模式(請(qǐng)參閱exec和run命令)$pig-xlocalgrunt>execmyscript.pig;orgrunt>runmyscript.pig;6pig的配置文件命令行-批處理,mapreduce模式$pigmyscript.pig命令行-批處理,本地模式模式$pig-xlocalmyscript.pig7pig的配置文件一般來說,Pig處理Pig拉丁語句如下:1.首先,Pig驗(yàn)證所有語句的語法和語義。2.接下來,如果Pig遇到DUMP或STORE,Pig將執(zhí)行這些語句。在這個(gè)例子中,Pig將驗(yàn)證但不執(zhí)行LOAD和FOREACH語句。A=LOAD'student'USINGPigStorage()AS(name:chararray,age:int,gpa:float);B=FOREACHAGENERATEname;8pig的配置文件在這個(gè)例子中,Pig將驗(yàn)證并執(zhí)行LOAD,F(xiàn)OREACH和DUMP語句。A=LOAD'student'USINGPigStorage()AS(name:chararray,age:int,gpa:float);B=FOREACHAGENERATEname;DUMPB;(John)(Mary)(Bill)(Joe)9pig的配置文件調(diào)試豬拉丁語拉丁語包括可以幫助您調(diào)試?yán)≌Z句的操作符:1.使用DESCRIBE運(yùn)算符來查看關(guān)系的模式。2.使用EXPLAIN運(yùn)算符查看邏輯,物理或映射減少執(zhí)行計(jì)劃以計(jì)算關(guān)系。3.使用ILLUSTRATE運(yùn)算符來查看一系列語句的逐步執(zhí)行。10pig的配置文件使用數(shù)據(jù)拉丁文允許您以多種方式處理數(shù)據(jù)。一般而言,作為一個(gè)起點(diǎn):1.使用FILTER運(yùn)算符處理元組或行數(shù)據(jù)。使用FOREACH運(yùn)算符處理數(shù)據(jù)列。2.使用GROUP運(yùn)算符可以將數(shù)據(jù)分組在單個(gè)關(guān)系中。使用COGROUP和JOIN運(yùn)算符以兩個(gè)或更多關(guān)系對(duì)數(shù)據(jù)進(jìn)行分
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 鐵路車輛制修工風(fēng)險(xiǎn)評(píng)估與管理模擬考核試卷含答案
- 環(huán)己胺裝置操作工班組管理知識(shí)考核試卷含答案
- 搪瓷坯體制作工崗前崗位適應(yīng)能力考核試卷含答案
- 拉深工安全理論競賽考核試卷含答案
- 減粘裂化裝置操作工崗前安全操作考核試卷含答案
- 計(jì)算機(jī)板級(jí)維修工操作評(píng)估評(píng)優(yōu)考核試卷含答案
- 中獸醫(yī)員持續(xù)改進(jìn)能力考核試卷含答案
- 班主任安全培訓(xùn)
- 2026北京門頭溝初二上學(xué)期期末語文試卷和答案
- 2026年智能廚房中控系統(tǒng)項(xiàng)目投資計(jì)劃書
- 招標(biāo)績效考核方案(3篇)
- 500萬的咨詢合同范本
- 2025年貸款房屋轉(zhuǎn)贈(zèng)協(xié)議書
- 2025天津市個(gè)人房屋租賃合同樣本
- 中藥熱熨敷技術(shù)及操作流程圖
- 鶴壁供熱管理辦法
- 01 華為采購管理架構(gòu)(20P)
- 糖尿病逆轉(zhuǎn)與綜合管理案例分享
- 工行信息安全管理辦法
- 娛樂場所安全管理規(guī)定與措施
- 化學(xué)●廣西卷丨2024年廣西普通高中學(xué)業(yè)水平選擇性考試高考化學(xué)真題試卷及答案
評(píng)論
0/150
提交評(píng)論