spark編程基礎(chǔ)python版期末考試題庫(kù)

一.選擇判斷

1.下面哪個(gè)不是RDD的特點(diǎn)()

A.可分區(qū)B.可序列化C.可修改D.可持久化

2.關(guān)于累加器，下面哪個(gè)是錯(cuò)誤的()

A.支持加法

B.支持?jǐn)?shù)值類(lèi)型

C.可并行

D.不支持自定義類(lèi)型

3.Scala語(yǔ)言中，以下說(shuō)法正確的是()

A.常量和變量都可以不用賦初始值

B.常量需要賦初始值，變量可以不用賦初始值

C.常量和變量都需要賦初始侑

D.常量不需要賦初始值，變量必須賦初始值

4.下面對(duì)MapReduce描述錯(cuò)誤的是()

A.適合離線批處理

B.具有很好的容錯(cuò)性和擴(kuò)展性

C.啟動(dòng)開(kāi)銷(xiāo)小、可以使用很少的磁盤(pán)到時(shí)效率提高

D.Shuffle連接Map和Reduce

6.下列哪一項(xiàng)是yarn的一級(jí)調(diào)度管理()

A.計(jì)算資源管理

B.Schedule的周期管理

C.application內(nèi)部計(jì)算模型管理

D.多樣化計(jì)算模型管理

7.Scala里，final修飾符的描述正確的是()

A.類(lèi)的聲明上添加final修飾符確保成員不被子類(lèi)重載

B.類(lèi)的聲明上添加final修飾符把整個(gè)類(lèi)聲明為final,這個(gè)類(lèi)

不能被繼承

C.類(lèi)的聲明上添加final修飾符確保成員只能被子類(lèi)重載一次

D.以上說(shuō)法都是錯(cuò)誤的

8.調(diào)用函數(shù)時(shí)指定()，參數(shù)順序可以跟函數(shù)定義時(shí)的順序不同

A.參數(shù)名

B.參數(shù)值

C.默認(rèn)值

D.變量值

9.scala中，類(lèi)和它的伴生對(duì)象說(shuō)法錯(cuò)誤的是()

A.類(lèi)和它的伴生對(duì)象定義在同一個(gè)文件中。

B.類(lèi)和它的伴生對(duì)象可以有不同的名稱。

C.類(lèi)和它的伴生對(duì)象可以互相訪問(wèn)私有特性。

D.類(lèi)和它的伴生對(duì)象可以實(shí)現(xiàn)既有實(shí)例方法又有靜態(tài)方法。

10.以下()可以實(shí)現(xiàn)類(lèi)似java中的break跳出方式

A.使用一個(gè)Boolean類(lèi)型的控制變量，合適的時(shí)候return

B.使用嵌套函數(shù)一從函數(shù)當(dāng)中return

C.使用Breaks對(duì)象中的break方法

D.使用continue

ABC

H.Spark可以實(shí)現(xiàn)哪些形式的分布式計(jì)算()

A.內(nèi)存式運(yùn)算

B.機(jī)器學(xué)習(xí)

C.交互式查詢

D.流式計(jì)算

ABCD

12.Spark的算子類(lèi)型()

A.轉(zhuǎn)換算子

B.迭代算子

C.動(dòng)作算子

D.核心算子

AC

13.下列哪些是spark的特點(diǎn)()

A.運(yùn)行快

B.基于內(nèi)存

C.底層是mr運(yùn)算

D.速度快

ABD

14.spark的存儲(chǔ)級(jí)別包含()

A.MEMORYONLY

B.MEMORYONLYSER

C.MEMORY

D.MEMORY_AND_DISK_SER

ABD

15.以下是Spark中executor的作用是（）

A.保存計(jì)算的RDD分區(qū)數(shù)據(jù)

B.向Driver反向注冊(cè)

C.接受Driver端發(fā)送來(lái)的任務(wù)Task,作用在RDD上進(jìn)行執(zhí)行

D.做資源調(diào)度任務(wù)

ABC

16,關(guān)于累加器，下面哪個(gè)是正確的（）

A.支持加法

B.支持?jǐn)?shù)值類(lèi)型

C.可并行

D.不支持自定義類(lèi)型

ABC

17.關(guān)于廣播變量，下面哪個(gè)是正確的（）

A.任何函數(shù)調(diào)用

B.是只讀的

C.存儲(chǔ)在各個(gè)節(jié)點(diǎn)

D.存儲(chǔ)在磁盤(pán)或1IDFS

ABC

18.spark的特點(diǎn)有哪些()

A.快速性

B.通用性

C.兼容性

D.持續(xù)性

ABC

19.下列選項(xiàng)有哪些是spark優(yōu)化()

A.復(fù)用同一個(gè)rdd

B.創(chuàng)建重復(fù)的rdd

C.盡量使用shuffle算子

D.使用map-side預(yù)聚合的shuffle操作

AD

20.關(guān)于累加器，下面哪個(gè)是正確的的()

A.支持加法

B.支持?jǐn)?shù)值類(lèi)型

C.不可并行

D.不支持自定義類(lèi)型

AB

21.spark的特點(diǎn)包括()

A.快速

B.通用

C.可延伸

D.兼容性

ABD

22.容錯(cuò)的級(jí)別有()

A.最多一次

B.至少一次

C.一次僅一次

D.只能一次

ABC

23.關(guān)于廣播變量，下面哪個(gè)是錯(cuò)誤的()

A.任何函數(shù)調(diào)用B.是只讀的

C.存儲(chǔ)在各個(gè)節(jié)點(diǎn)D.存儲(chǔ)在磁盤(pán)或HDFS

ABC

24.Spark的數(shù)據(jù)本地性有哪幾種()

A.PROCESS_LOCAL是指讀取緩存在本地節(jié)點(diǎn)的數(shù)據(jù)

B.NODE_LOCAL是指讀取本地節(jié)點(diǎn)硬盤(pán)數(shù)據(jù)

C.ANY是指讀取非本地節(jié)點(diǎn)數(shù)據(jù)

D.B和C對(duì)

ABC

25.關(guān)于master的作用，下面正確的是()

A.接受driver端注冊(cè)請(qǐng)求

B.啟動(dòng)任務(wù)的容器Executor

C.任務(wù)資源的調(diào)度

D.監(jiān)控集群

ACD

26.如何解決數(shù)據(jù)傾斜()

A.增大分區(qū)

B.增加前綴或后綴

C.減少分區(qū)

D.根據(jù)需要找Key

ABD

27.Spark的資源分配方式包括()

A.盡量集中

B.盡量打散

C.全部集中

D.全部打散

AB

28.下面哪些端口是spark自帶服務(wù)的端口()

A.8080B.4040C.8090D.18080

ABD

29.下面屬于HDFS設(shè)計(jì)目標(biāo)的是

A.自動(dòng)快速檢測(cè)應(yīng)對(duì)硬件錯(cuò)誤

B.流式訪問(wèn)數(shù)據(jù)

C.移動(dòng)計(jì)算比移動(dòng)數(shù)據(jù)本身更劃算

D.簡(jiǎn)單一致性模型

ABCD

30.下面描述正確的是()

A.HDFS將數(shù)量眾多的廉價(jià)機(jī)器使得硬件錯(cuò)