表生成函數(shù)表生成函數(shù)概述表生成函數(shù)的應(yīng)用01

表生成函數(shù)概述表生成函數(shù)Hive中的表分析函數(shù)接受零個(gè)或多個(gè)輸入，然后產(chǎn)生多列或多行輸出。表生成函數(shù)：

表生成函數(shù)

explode(map_col)as(may_key_col,may_value_col)

explode函數(shù)：

1.explode(array)2.用于map類(lèi)型數(shù)據(jù)時(shí)explode函數(shù)以array類(lèi)型數(shù)據(jù)輸入，然后對(duì)數(shù)組中的數(shù)據(jù)進(jìn)行迭代，返回多行結(jié)果，一行一個(gè)數(shù)組元素值。

由于map是key-value結(jié)構(gòu)的，所以它在轉(zhuǎn)換的時(shí)候會(huì)轉(zhuǎn)換成兩列，一列是key轉(zhuǎn)換而成的，一列是value轉(zhuǎn)換而成的。表生成函數(shù)3.局限性不能關(guān)聯(lián)原有的表中的其他字段。不能與groupby、clusterby、distributeby、sortby聯(lián)用。不能進(jìn)行UDTF嵌套.explode函數(shù):表生成函數(shù)4.想要解決UDTF問(wèn)題可以使用lateralviewfrom子句后面也可以跟多個(gè)lateralview語(yǔ)句，使用空格間隔就可以了lateralview表示將UDTF分裂的字段放在虛擬表中,然后和主表table_origin進(jìn)行關(guān)聯(lián)。UDTF(expression)：復(fù)合邏輯規(guī)則的UDTF函

數(shù)，最常用的explodetable_view:對(duì)應(yīng)的虛擬表的表名new_col:虛擬表里存放的有效字段02

表生成函數(shù)案例explode函數(shù)案例1：hive(jimdb)>SELECTexplode(array(1,2,3))ASelement;OKelement123Timetaken:0.327seconds,Fetched:3row(s)。explode函數(shù)案例2：創(chuàng)建一張測(cè)試表單；hive(default)>select*fromtest1;--表數(shù)據(jù)test1.phonenumber'bingliu''xiaozhang''xiaoli''qiangdongliu'createtabletest1(namestring,phonenumberstring)ROWFORMATDELIMITEDFIELDSTERMINATEDBY'\t';explode函數(shù)需求：過(guò)濾掉該表中，電話號(hào)碼中0-9的某個(gè)數(shù)字，在電話號(hào)碼中出現(xiàn)6次及以上的號(hào)碼，然后將正常的號(hào)碼返回。hive(jimdb)>SELECT,c.phonenumber

>FROM

>(SELECT,dd.phonenumber,MAX()

>FROM(SELECT,d.phonenumber,d.m,COUNT(*)cn

>FROM(SELECTname,phonenumber,mFROMtest1LATERALVIEWexplode(split(phonenumber,''))nASm)d

>GROUPBY,d.phonenumber,d.m)dd

>GROUPBY,dd.phonenumberHAVINGMAX()<=5)c;執(zhí)行語(yǔ)句如下：結(jié)果：c.phonen