互聯(lián)網(wǎng)行業(yè)大數(shù)據(jù)開發(fā)工程師(Flink 方向)崗位招聘考試試卷及答案_第1頁(yè)
互聯(lián)網(wǎng)行業(yè)大數(shù)據(jù)開發(fā)工程師(Flink 方向)崗位招聘考試試卷及答案_第2頁(yè)
互聯(lián)網(wǎng)行業(yè)大數(shù)據(jù)開發(fā)工程師(Flink 方向)崗位招聘考試試卷及答案_第3頁(yè)
互聯(lián)網(wǎng)行業(yè)大數(shù)據(jù)開發(fā)工程師(Flink 方向)崗位招聘考試試卷及答案_第4頁(yè)
互聯(lián)網(wǎng)行業(yè)大數(shù)據(jù)開發(fā)工程師(Flink 方向)崗位招聘考試試卷及答案_第5頁(yè)
已閱讀5頁(yè),還剩4頁(yè)未讀 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)

文檔簡(jiǎn)介

互聯(lián)網(wǎng)行業(yè)大數(shù)據(jù)開發(fā)工程師(Flink方向)崗位招聘考試試卷及答案一、填空題(10題,每題1分)1.Flink的核心數(shù)據(jù)抽象是DataSet和DataStream。2.Flink中處理亂序事件的核心機(jī)制是Watermark(水位線)。3.窗口類型中,不重疊且固定長(zhǎng)度的窗口稱為滾動(dòng)窗口。4.Flink狀態(tài)后端默認(rèn)的實(shí)現(xiàn)是MemoryStateBackend(或HeapStateBackend,視版本)。5.事件時(shí)間語(yǔ)義下,F(xiàn)link通過(guò)時(shí)間戳分配器提取數(shù)據(jù)中的時(shí)間戳。6.Checkpoint的默認(rèn)間隔時(shí)間為10分鐘(可配置)。7.Flink作業(yè)的并行度可以通過(guò)`setParallelism()`在算子級(jí)別單獨(dú)設(shè)置。8.側(cè)輸出流(SideOutput)通常用于處理不符合主邏輯的異常數(shù)據(jù)。9.FlinkSQL的底層優(yōu)化器基于ApacheCalcite實(shí)現(xiàn)。10.Flink集群中負(fù)責(zé)資源管理的組件是ResourceManager。二、單項(xiàng)選擇題(10題,每題2分)1.Flink默認(rèn)的時(shí)間語(yǔ)義是()。A.事件時(shí)間B.處理時(shí)間C.攝入時(shí)間D.系統(tǒng)時(shí)間答案:B2.以下哪個(gè)算子用于將流數(shù)據(jù)按鍵分組?()A.map()B.filter()C.keyBy()D.reduce()答案:C3.窗口觸發(fā)計(jì)算的條件通常是()。A.窗口內(nèi)數(shù)據(jù)量達(dá)到閾值B.Watermark超過(guò)窗口結(jié)束時(shí)間C.處理時(shí)間到達(dá)窗口結(jié)束時(shí)間D.任意數(shù)據(jù)到達(dá)窗口答案:B4.大狀態(tài)場(chǎng)景下,推薦使用的狀態(tài)后端是()。A.MemoryStateBackendB.RocksDBStateBackendC.HashMapStateBackendD.FileSystemStateBackend答案:B5.Savepoint與Checkpoint的主要區(qū)別是()。A.Savepoint是自動(dòng)觸發(fā)的,Checkpoint是手動(dòng)觸發(fā)的B.Savepoint支持作業(yè)升級(jí),Checkpoint不支持C.Savepoint存儲(chǔ)更簡(jiǎn)單,Checkpoint存儲(chǔ)復(fù)雜D.無(wú)本質(zhì)區(qū)別答案:B6.Watermark的生成方式不包括()。A.周期性生成(Periodic)B.標(biāo)點(diǎn)生成(Punctuated)C.批量生成(Batch)D.基于事件時(shí)間戳生成答案:C7.反壓(Backpressure)的根本原因是()。A.網(wǎng)絡(luò)帶寬不足B.下游算子處理速度慢于上游C.狀態(tài)存儲(chǔ)性能差D.數(shù)據(jù)量突然增大答案:B8.Flink中用于定義窗口大小的時(shí)間單位是()。A.毫秒(milliseconds)B.秒(seconds)C.分鐘(minutes)D.可自定義答案:D9.以下哪個(gè)不是Flink的重啟策略?()A.固定延遲重啟(FixedDelay)B.失敗率重啟(FailureRate)C.無(wú)重啟(NoRestart)D.動(dòng)態(tài)擴(kuò)縮容重啟(ScaleRestart)答案:D10.Flink作業(yè)的入口類是()。A.StreamGraphB.JobGraphC.StreamExecutionEnvironmentD.JobManager答案:C三、多項(xiàng)選擇題(10題,每題2分)1.Flink支持的時(shí)間語(yǔ)義包括()。A.事件時(shí)間(EventTime)B.處理時(shí)間(ProcessingTime)C.攝入時(shí)間(IngestionTime)D.系統(tǒng)時(shí)間(SystemTime)答案:ABC2.以下屬于窗口(Window)類型的是()。A.滾動(dòng)窗口(TumblingWindow)B.滑動(dòng)窗口(SlidingWindow)C.會(huì)話窗口(SessionWindow)D.全局窗口(GlobalWindow)答案:ABCD3.Flink的狀態(tài)類型包括()。A.鍵控狀態(tài)(KeyedState)B.操作符狀態(tài)(OperatorState)C.廣播狀態(tài)(BroadcastState)D.臨時(shí)狀態(tài)(TemporaryState)答案:ABC4.Checkpoint的觸發(fā)條件包括()。A.達(dá)到配置的間隔時(shí)間B.所有算子狀態(tài)對(duì)齊(Barrier對(duì)齊)C.作業(yè)處于空閑狀態(tài)D.手動(dòng)調(diào)用觸發(fā)答案:AB5.Kafka作為Flink數(shù)據(jù)源時(shí),需要配置的參數(shù)有()。A.bootstrap.serversB.topicC.group.idD.auto.offset.reset答案:ABCD6.以下屬于Flink調(diào)優(yōu)手段的是()。A.調(diào)整并行度B.選擇合適的狀態(tài)后端C.減少網(wǎng)絡(luò)傳輸(如本地聚合)D.增加Checkpoint頻率答案:ABC7.Watermark的特性包括()。A.單調(diào)遞增B.允許設(shè)置最大延遲時(shí)間C.可以回退D.僅用于事件時(shí)間語(yǔ)義答案:ABD8.Flink的容錯(cuò)機(jī)制依賴于()。A.檢查點(diǎn)(Checkpoint)B.保存點(diǎn)(Savepoint)C.重啟策略(RestartStrategy)D.狀態(tài)后端(StateBackend)答案:ABCD9.以下屬于DataStream轉(zhuǎn)換算子的是()。A.keyBy()B.window()C.process()D.table()(轉(zhuǎn)換為Table)答案:ABC10.Flink集群的核心組件包括()。A.JobManagerB.TaskManagerC.ResourceManagerD.NameNode答案:ABC四、判斷題(10題,每題2分)1.Flink默認(rèn)的時(shí)間語(yǔ)義是事件時(shí)間。()答案:×2.滾動(dòng)窗口(TumblingWindow)的窗口之間不會(huì)重疊。()答案:√3.操作符狀態(tài)(OperatorState)只能在非鍵控流中使用。()答案:√4.Checkpoint間隔越短,作業(yè)的容錯(cuò)能力越強(qiáng),因此應(yīng)盡可能縮短間隔。()答案:×(過(guò)短會(huì)增加性能開銷)5.Watermark可以完全解決事件亂序問(wèn)題。()答案:×(僅處理設(shè)置的最大延遲內(nèi)的亂序)6.FlinkSQL的底層執(zhí)行計(jì)劃由Calcite優(yōu)化器生成。()答案:√7.反壓?jiǎn)栴}可以通過(guò)簡(jiǎn)單增加并行度解決。()答案:×(需定位慢算子根源)8.內(nèi)存狀態(tài)后端(MemoryStateBackend)適合處理大狀態(tài)場(chǎng)景。()答案:×(適合小狀態(tài))9.Savepoint必須在作業(yè)運(yùn)行時(shí)創(chuàng)建。()答案:√10.Flink支持流批一體(Batch/StreamUnified)處理。()答案:√五、簡(jiǎn)答題(4題,每題5分)1.簡(jiǎn)述Flink中事件時(shí)間(EventTime)、處理時(shí)間(ProcessingTime)和攝入時(shí)間(IngestionTime)的區(qū)別。答案:事件時(shí)間是數(shù)據(jù)本身攜帶的時(shí)間戳(如日志生成時(shí)間),需通過(guò)時(shí)間戳分配器提取,并結(jié)合Watermark處理亂序;處理時(shí)間是數(shù)據(jù)被Flink算子處理的機(jī)器時(shí)間(易受系統(tǒng)延遲影響);攝入時(shí)間是數(shù)據(jù)進(jìn)入Flink數(shù)據(jù)源(如Kafka)的時(shí)間,介于事件時(shí)間和處理時(shí)間之間,由數(shù)據(jù)源自動(dòng)分配時(shí)間戳。事件時(shí)間最準(zhǔn)確但需要處理亂序,處理時(shí)間最簡(jiǎn)單但精度低,攝入時(shí)間折中。2.窗口(Window)和Watermark的關(guān)系是什么?答案:窗口用于將流數(shù)據(jù)按時(shí)間或數(shù)量劃分成有限的數(shù)據(jù)集(如10分鐘的滾動(dòng)窗口);Watermark是事件時(shí)間的“進(jìn)度標(biāo)識(shí)”,表示后續(xù)不會(huì)有更早時(shí)間戳的數(shù)據(jù)到達(dá)。當(dāng)Watermark超過(guò)窗口的結(jié)束時(shí)間時(shí),窗口觸發(fā)計(jì)算,輸出結(jié)果。若數(shù)據(jù)延遲到達(dá)但時(shí)間戳在窗口范圍內(nèi)且未超過(guò)Watermark的最大允許延遲,仍會(huì)被包含到窗口中;否則會(huì)被丟棄或發(fā)送到側(cè)輸出流。3.Flink狀態(tài)管理需要注意哪些問(wèn)題?答案:①狀態(tài)類型選擇:鍵控狀態(tài)(KeyedState)需配合keyBy使用,操作符狀態(tài)(OperatorState)用于非鍵控流;②狀態(tài)后端選擇:小狀態(tài)用內(nèi)存/堆后端,大狀態(tài)用RocksDB;③狀態(tài)TTL(生存時(shí)間):避免狀態(tài)無(wú)限增長(zhǎng),需配置自動(dòng)清理;④狀態(tài)序列化:需選擇高效的序列化方式(如Kryo),避免反序列化性能問(wèn)題;⑤狀態(tài)一致性:通過(guò)Checkpoint保證故障恢復(fù)后的狀態(tài)一致性。4.Checkpoint和Savepoint的主要區(qū)別是什么?答案:Checkpoint是自動(dòng)觸發(fā)的周期性快照,用于作業(yè)故障恢復(fù)(如TaskManager崩潰),依賴配置的間隔和狀態(tài)后端,格式可能隨Flink版本變化;Savepoint是手動(dòng)觸發(fā)的快照(如`flinksavepoint`命令),用于作業(yè)升級(jí)、遷移或手動(dòng)恢復(fù),格式更通用(兼容版本升級(jí)),通常存儲(chǔ)在外部存儲(chǔ)(如HDFS)。Checkpoint可自動(dòng)清理,Savepoint需手動(dòng)管理。六、討論題(2題,每題5分)1.生產(chǎn)環(huán)境中,F(xiàn)link作業(yè)出現(xiàn)反壓(Backpressure)時(shí),如何排查和解決?答案:排查步驟:①查看FlinkWebUI的反壓監(jiān)控(如TaskManager的堆棧跟蹤),定位慢算子;②檢查算子的輸入/輸出速率(Metrics中的`numRecordsInPerSecond`/`numRecordsOutPerSecond`),確認(rèn)是否下游處理慢;③分析狀態(tài)操作(如RocksDB的讀寫延遲)、外部系統(tǒng)調(diào)用(如數(shù)據(jù)庫(kù)查詢)或復(fù)雜計(jì)算邏輯(如大窗口聚合)是否耗時(shí)。解決方法:①優(yōu)化慢算子邏輯(如預(yù)聚合、減少狀態(tài)訪問(wèn));②調(diào)整并行度(提高慢算子的并行度);③優(yōu)化狀態(tài)后端(如大狀態(tài)改用RocksDB);④檢查外部系統(tǒng)性能(如Kafka消費(fèi)延遲、數(shù)據(jù)庫(kù)連接池);⑤增加資源(如TaskManager的CPU/內(nèi)存)。2.設(shè)計(jì)Flink實(shí)時(shí)數(shù)倉(cāng)時(shí),需要考慮哪些核心要點(diǎn)?答案:①數(shù)據(jù)分層:參考離線數(shù)倉(cāng)設(shè)計(jì),劃分ODS(原始數(shù)據(jù))、DWD(明細(xì)數(shù)據(jù))、DWS(聚合數(shù)據(jù))、ADS(應(yīng)用數(shù)據(jù)),明確每層的計(jì)算邏輯;②維度管理:處理緩慢變化

溫馨提示

  • 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。

評(píng)論

0/150

提交評(píng)論