【MOOC】信息理論與編碼-武漢理工大學(xué)中國大學(xué)慕課MOOC答案第1章作業(yè)第1章緒論單元測試1、【單選題】下列不屬于狹義信息論的是。本題答案：【噪聲理論】2、【單選題】下列不屬于信息論的研究內(nèi)容的是。本題答案：【信息的產(chǎn)生】3、【單選題】下列關(guān)于信息論發(fā)展歷史描述不正確的是。本題答案：【1952年，香農(nóng)發(fā)展并證明了信道容量的迭代算法?！?、【單選題】下列屬于通信工作者所關(guān)心的是。本題答案：【語法信息】5、【單選題】信息論的創(chuàng)始人與奠基人是。本題答案：【香農(nóng)】6、【單選題】信息傳輸系統(tǒng)模型中，用來提升信息傳輸?shù)挠行缘牟糠譃椤１绢}答案：【信源編碼器、信源譯碼器】7、【單選題】信息傳輸系統(tǒng)模型中，用來提升信息傳輸?shù)目煽啃缘牟糠譃?。本題答案：【信道編碼器、信道譯碼器】8、【單選題】投硬幣“正面朝上”和擲骰子“數(shù)字6朝上”，哪一個事件發(fā)生的不確定性較大？本題答案：【擲骰子數(shù)字6朝上】9、【單選題】數(shù)據(jù)傳輸?shù)臉O限是。本題答案：【信道容量】10、【多選題】下列屬于香農(nóng)信息論的主要研究理論的是。本題答案：【壓縮理論#傳輸理論#保密理論】11、【多選題】使信息傳輸系統(tǒng)達到最優(yōu)化，信息傳輸?shù)男枰獫M足。本題答案：【可靠性#有效性#保密性#認證性】12、【多選題】香農(nóng)信息定義的缺陷包含。本題答案：【需要尋找合適的概率模型來描述。#沒有考慮收信者的主觀特性和主觀意義。】13、【多選題】信源編碼的作用包含。本題答案：【對信源的輸出進行符號變換#數(shù)據(jù)壓縮】14、【多選題】香農(nóng)信息論回答了通信理論的兩個基本問題是。本題答案：【數(shù)據(jù)壓縮的極限是多少？#信息傳輸速率的極限是多少？】15、【判斷題】信息傳輸系統(tǒng)模型表明，噪聲僅僅來源于物理信道。本題答案：【錯誤】16、【判斷題】信道編碼與譯碼是一對可逆變換。本題答案：【錯誤】17、【判斷題】1976年，論文“密碼學(xué)的新方向”的發(fā)表，標(biāo)志著保密通信理論研究的開始。本題答案：【錯誤】18、【判斷題】從通信工作者的角度而言，信息是不確定性的減少。本題答案：【正確】19、【判斷題】信息論中，消息就是信息。本題答案：【錯誤】20、【判斷題】由于信道中的噪聲往往具有隨機性，因此信道的特性可以用概率空間來描述。本題答案：【正確】21、【判斷題】香農(nóng)信息論中采用概率作為度量信息的數(shù)學(xué)工具。本題答案：【正確】22、【判斷題】香農(nóng)理論的核心是揭示了在通信系統(tǒng)中采用適當(dāng)?shù)木幋a能夠?qū)崿F(xiàn)信息的高效率、高可靠性傳輸，并得出了信源編碼定理和信道編碼定理。本題答案：【正確】23、【判斷題】數(shù)據(jù)壓縮的極限是信道容量。本題答案：【錯誤】24、【判斷題】在非理性觀察模型中的先驗概率通常是統(tǒng)一得出的。本題答案：【正確】2.1-2.32.4-2.62.7-2.10第2章信息的度量單元測試1、【單選題】設(shè)Ｘ的取值受限于有限區(qū)間［a,b］，則X服從時，其熵達到最大。本題答案：【均勻分布】2、【單選題】設(shè)連續(xù)信源Ｘ的平均功率受限，則X服從時，其熵達到最大。本題答案：【高斯分布#正態(tài)分布】3、【單選題】若自信息量的計算中以10為底，其單位為。本題答案：【dit/符號】4、【單選題】離散平穩(wěn)無記憶信源X，H(X)=2bit/符號，則bit/符號。本題答案：【8】5、【單選題】當(dāng)時，則。本題答案：【0】6、【單選題】非理想觀察模型中，在對信源進行觀察之前，對認識主體來說，信源存在。本題答案：【先驗不確定性】7、【單選題】設(shè)Ｘ的取值受限于有限區(qū)間［a,b］，則X服從時，其熵達到最大。本題答案：【均勻分布】8、【單選題】時間離散、幅值離散的信道稱為信道。本題答案：【離散】9、【單選題】若某一事件概率為0，離散熵公式中對應(yīng)的項=。本題答案：【0】10、【單選題】下列不屬于未經(jīng)統(tǒng)計平均的不確定性的是。本題答案：【互信息量】11、【單選題】信源X的先驗不確定性是關(guān)于的函數(shù)。本題答案：【先驗概率】12、【單選題】拋三個狀態(tài)相互獨立的硬幣，“它們朝上的面都相同”這個事件的自信息量是。本題答案：【2bit】13、【單選題】拋四個狀態(tài)相互獨立的硬幣，“它們正面都朝上”這個事件的不確定性是。本題答案：【4bit】14、【單選題】若連續(xù)信源的平均功率受限，若想使其信息率達到最大，發(fā)送的信息需要滿足。本題答案：【高斯分布】15、【單選題】對于一般的離散有記憶信源而言，表示該信源平均每個符號所含有的不確定性。本題答案：【極限熵】16、【多選題】以下物理量具有非負性的是。本題答案：【H(X)#H(XY)###H(X|Y)#】17、【多選題】對于N階離散平穩(wěn)信源X，可以用描述其不確定性。本題答案：【平均符號熵#條件熵#極限熵】18、【多選題】關(guān)于自信息量的性質(zhì)，正確的是。本題答案：【自信息量具有可加性：#自信息量的可加性可推廣到N維空間。】19、【多選題】下列表達式正確的是。本題答案：【##】20、【多選題】下列關(guān)于互信息量的描述不正確的是。本題答案：【互信息量具有非負性。#若兩個隨機變量相互獨立，則兩者彼此間提供的互信息為1.】21、【多選題】下列有關(guān)熵的關(guān)系式正確的是。本題答案：【H(p1,p2,...pk)=0#H(XY)=H(X)+H(Y)】22、【多選題】下列有關(guān)熵的性質(zhì)說法正確的是。本題答案：【H(XY)=H(X)+H(Y|X)體現(xiàn)了熵的強可加性#H(XY)=H(X)+H(Y)體現(xiàn)了熵的可加性#熵的可加性和強可加性都可以推廣到多元的情況】23、【多選題】下列關(guān)系式中正確的是。本題答案：【##】24、【多選題】下列關(guān)于連續(xù)信源的熵說法正確的是。本題答案：【連續(xù)信源的熵為無窮大#連續(xù)信源的平均互信息量具有絕對意義】25、【判斷題】信息含量效率越高，信源的冗余度也越高。本題答案：【錯誤】26、【判斷題】信源內(nèi)部的關(guān)聯(lián)性，會提高熵值。本題答案：【錯誤】27、【判斷題】增加條件不會增大不確定性。本題答案：【正確】28、【判斷題】通過信源編碼來提升信息傳輸效率，意味著提升信源的信息含量效率，降低冗余度。本題答案：【正確】29、【判斷題】確定性事件的熵為1.本題答案：【錯誤】30、【判斷題】先驗概率越小，信源的實在信息越大。本題答案：【正確】31、【判斷題】根據(jù)自信息量的公式，我們認為概率為0的事件的不確定性為無窮大。本題答案：【錯誤】32、【判斷題】自信息量是變量的函數(shù)。本題答案：【錯誤】33、【判斷題】256個亮度值構(gòu)成的信源，其熵值最大為8比特。本題答案：【正確】34、【判斷題】當(dāng)離散無記憶信源滿足確定分布時，其熵可大最大值。本題答案：【錯誤】35、【判斷題】極限熵反應(yīng)了信源的平均不確定性，信源的實在信息在數(shù)值上等于極限熵。本題答案：【正確】36、【判斷題】互信息量與平均互信息量都具有非負性。本題答案：【錯誤】37、【判斷題】連續(xù)信源不滿足高斯分布時，其剩余度必然大于0.本題答案：【正確】38、【判斷題】對于N階平穩(wěn)信源而言，其聯(lián)合熵表示該信源平均每個符號所含有的不確定性。本題答案：【錯誤】39、【填空題】在對信源進行觀察之前，對認識主體來說，信源存在。本題答案：【先驗不確定性】40、【填空題】考慮任意N個相鄰時刻輸出的隨機變量，將其看成一個新的離散無記憶信源的輸出，則稱為。本題答案：【N次擴展信源】41、【填空題】是自信息量的統(tǒng)計平均。本題答案：【熵】42、【填空題】若信源熵H(X)=1bit/符號，條件熵H(Y|X)=0.5bit/符號，則聯(lián)合熵H(XY)=bit/符號。本題答案：【1.5】43、【填空題】時間離散、幅值離散的信道稱為信道。本題答案：【離散】44、【填空題】若bit/符號，bit/符號，則bit/符號。本題答案：【4】45、【填空題】對信源進行觀察后，信源通常還存在它與信源的后驗概率有關(guān)。本題答案：【后驗不確定性】3.5隨堂測試1、【單選題】信息傳輸系統(tǒng)的數(shù)量指標(biāo)為。本題答案：【信息率】2、【單選題】信息傳輸系統(tǒng)的質(zhì)量指標(biāo)為。本題答案：【平均差錯率】3、【單選題】信道容量是由決定的。本題答案：【轉(zhuǎn)移概率矩陣】4、【單選題】二進制刪除信道為。本題答案：【準(zhǔn)對稱信道】5、【單選題】Z型信道為。本題答案：【一般信道】6、【單選題】下列轉(zhuǎn)移概率矩陣中，代表無損信道的是_____。本題答案：【】7、【判斷題】信道容量C不僅與信道轉(zhuǎn)移概率有關(guān)，也與信道的輸入分布有關(guān)。本題答案：【錯誤】8、【判斷題】離散對稱信道輸入等概率分布時，輸出未必也等概率分布。本題答案：【錯誤】9、【判斷題】一般DMC達到信道容量的充要條件為信源符號的偏互信息均等于信道容量。本題答案：【正確】10、【填空題】錯誤概率為p=0.05的BSC的信道容量為bit/符號。本題答案：【0.714##%_YZPRLFH_%##0.71##%_YZPRLFH_%##0.7136】11、【填空題】使得給定信道信息率_____的輸入分布，稱為最佳輸入(概率)分布，記為。本題答案：【最大】3.1-3.43.53.6-3.10第3章信道模型和信道容量單元測試1、【單選題】設(shè)信道容量為C，下列說法正確的是__________。本題答案：【C是信道的固有參數(shù)】2、【單選題】在串聯(lián)系統(tǒng)中，有效信息量的值_____。本題答案：【趨于變小】3、【單選題】若信道和信源均無記憶，以下結(jié)論不成立的是________。本題答案：【】4、【單選題】根據(jù)香農(nóng)信道容量公式，下列關(guān)于提升信道容量的方法不正確的是__________。本題答案：【增大噪聲功率】5、【單選題】下列轉(zhuǎn)移概率矩陣中，代表確定信道的是_____。本題答案：【】6、【單選題】對于無記憶加性噪聲信道，假設(shè)輸入信號服從高斯分布，且噪聲的平均功率受限，則服從高斯分布的噪聲使信道平均互信息達到。本題答案：【最小】7、【單選題】下列說法中，不正確的是__________。本題答案：【若X平均功率為P，但不是高斯分布，則】8、【單選題】信道容量是只與信道的有關(guān)。本題答案：【轉(zhuǎn)移概率】9、【單選題】在加性高斯噪聲信道中傳輸信息，當(dāng)輸入服從分布時，達到信道容量。本題答案：【高斯分布】10、【單選題】給定信道，I(X;Y)是概率的上凸函數(shù)。本題答案：【輸入】11、【單選題】衡量信息傳輸系統(tǒng)傳輸可靠性的技術(shù)指標(biāo)為。本題答案：【平均差錯率】12、【單選題】如果信源給定，那么是轉(zhuǎn)移概率的_____函數(shù)。本題答案：【下凸】13、【單選題】如果信道給定，那么是輸入概率的_____函數(shù)。本題答案：【上凸】14、【單選題】二進制刪除信道為。本題答案：【準(zhǔn)對稱信道】15、【單選題】信源的輸出與信道的輸入匹配的目的不包括_____。本題答案：【功率匹配】16、【單選題】若DMC的單符號信道容量為C，則其N次擴展信道信道容量。本題答案：【NC】17、【單選題】波形信道是指信道的輸入/輸出。本題答案：【時間連續(xù)，取值連續(xù)】18、【多選題】獨立并聯(lián)信道可等效為一個。本題答案：【DMC的N次擴展信道#多符號無記憶信道】19、【多選題】關(guān)于兩個獨立信道Q1、Q2串聯(lián)，下列說法正確的是_____。本題答案：【數(shù)據(jù)處理過程中，隨著數(shù)據(jù)的不斷處理，從處理后的數(shù)據(jù)中所得的原始信息會愈來愈少。#串聯(lián)信道的轉(zhuǎn)移概率矩陣是各單元信道的轉(zhuǎn)移概率矩陣之積。#從Z中獲得有關(guān)X的信息不大于從Y中所得X的信息量】20、【多選題】以下關(guān)于連續(xù)信道的說法中，正確的是_____。本題答案：【連續(xù)信道是時間離散、幅值連續(xù)的信道#加性噪聲信道的轉(zhuǎn)移概率密度函數(shù)等于噪聲的概率密度函數(shù)#對于無記憶加性噪聲信道，若輸入信號服從高斯分布，且噪聲的平均功率受限，則服從高斯分布的噪聲使信道平均互信息量達到最小】21、【判斷題】信源給定時，平均互信息量是關(guān)于轉(zhuǎn)移概率的上凸函數(shù)。本題答案：【錯誤】22、【判斷題】對于無記憶加性噪聲信道，若輸入信號服從高斯分布，且噪聲的平均功率受限，那么服從高斯的噪聲為最有害噪聲。本題答案：【正確】23、【判斷題】信道剩余度反映了信源與信道的匹配程度。本題答案：【正確】24、【判斷題】Z型信道屬于確定信道。本題答案：【錯誤】25、【判斷題】獨立并聯(lián)信道可等效為多符號的有記憶信道。本題答案：【錯誤】26、【判斷題】加性噪聲信道的轉(zhuǎn)移概率密度函數(shù)等于噪聲的概率密度函數(shù)。本題答案：【正確】27、【判斷題】連續(xù)信道的統(tǒng)計特性由轉(zhuǎn)移概率分布函數(shù)描述。本題答案：【錯誤】28、【判斷題】信道的平均互信息是輸入符號概率和轉(zhuǎn)移概率的函數(shù)。本題答案：【正確】29、【判斷題】錯誤概率為p=0.05的BSC的信道容量為0.5bit/符號。本題答案：【錯誤】30、【判斷題】離散對稱信道輸入等概率分布時，輸出必為等概率分布。本題答案：【正確】31、【判斷題】信源發(fā)出的N元隨機變量序列通過信道傳送，輸出N元隨機變量。若信道無記憶，則有。本題答案：【錯誤】32、【判斷題】信道是DMC的充要條件是符號序列對之間的轉(zhuǎn)移概率等于各個時刻單個符號對轉(zhuǎn)移概率之連乘。本題答案：【正確】33、【判斷題】信道容量C不僅與信道轉(zhuǎn)移概率有關(guān)，也與信道的輸入分布有關(guān)。本題答案：【錯誤】34、【填空題】信道容量是只與信道的有關(guān)。本題答案：【轉(zhuǎn)移概率】35、【填空題】將信道轉(zhuǎn)移概率矩陣的第i行乘以，得到聯(lián)合概率矩陣。本題答案：【P(ai)##%_YZPRLFH_%##第i個輸入符號概率】36、【填空題】時間離散、幅值離散信道稱為信道。本題答案：【離散】37、【填空題】對于離散對稱信道，當(dāng)輸入時，達到信道容量。本題答案：【等概】38、【填空題】在加性高斯噪聲信道中傳輸信息，當(dāng)輸入服從分布時，達到信道容量。本題答案：【高斯##%_YZPRLFH_%##正態(tài)】39、【填空題】給定信道，I(X;Y)是的概率的上凸函數(shù)。本題答案：【輸入##%_YZPRLFH_%##先驗】40、【填空題】衡量信息傳輸系統(tǒng)傳輸可靠性的技術(shù)指標(biāo)為。本題答案：【平均差錯率】4.1-4.44.5第4章離散無記憶信源無失真編碼單元測試1、【單選題】下述碼中_____一定是UDC。本題答案：【變長非續(xù)長碼】2、【單選題】以下無失真信源編碼方法中，編碼效率最高的是_____。本題答案：【霍夫曼編碼】3、【單選題】信源編碼的實質(zhì)是為了提高信息傳輸?shù)?。本題答案：【速度】4、【單選題】以下說法不正確的是_____。本題答案：【變長碼要求各個碼字的長度互不相同】5、【單選題】下列不可能是費諾編碼的碼字的是。本題答案：【{0,1,10,100}】6、【單選題】下面關(guān)于Kraft不等式的描述錯誤的是。本題答案：【滿足Kraft不等式的碼一定是UDC?！?、【單選題】無失真信源編碼方法中，為最優(yōu)碼。本題答案：【霍夫曼編碼】8、【單選題】無失真信源編碼只會對信源的進行壓縮，而不會改變信源的熵。本題答案：【冗余度】9、【單選題】香農(nóng)第一定理表明，無失真編碼的條件是平均碼長必須信道的r進制熵。本題答案：【大于等于】10、【單選題】編碼效率高意味著。本題答案：【平均碼長較短，冗余度較低】11、【單選題】信源的熵為2比特/符號，經(jīng)過2元編碼后，平均碼長為2.5碼元/符號，則編碼效率為_____。本題答案：【0.8】12、【單選題】一個信源的符號概率分布為[0.10.20.30.4]，對應(yīng)符號的碼長為[4321]，則該碼的平均碼長為________碼元/符號。本題答案：【2】13、【多選題】無失真信源編碼的作用有。本題答案：【提升信息傳輸?shù)挠行浴?冗余度壓縮。#符號變化】14、【多選題】下面關(guān)于Kraft不等式的說法中，正確的有。本題答案：【非續(xù)長碼一定滿足Kraft不等式。#不滿足Kraft不等式的碼一定不是UDC。#UDC一定滿足Kraft不等式?！?5、【判斷題】非續(xù)長碼一定是唯一可譯碼。本題答案：【正確】16、【判斷題】霍夫曼編碼能夠嚴格按照“概率大碼長小、概率小碼長大”來決定碼長。本題答案：【正確】17、【判斷題】香農(nóng)編碼可以保證碼字具有非續(xù)長性。本題答案：【正確】18、【判斷題】非奇異碼一定是唯一可譯碼，唯一可譯碼不一定是非奇異碼。本題答案：【錯誤】19、【判斷題】對信源的N長符號串進行編碼可提升編碼效率。本題答案：【正確】20、【判斷題】如果信源分布越不均勻，信源壓縮的可能性就越大。本題答案：【正確】21、【判斷題】對于一個碼，若每個碼字都與惟一的一個信源符號相對應(yīng)，則該碼為惟一可譯碼。本題答案：【錯誤】22、【判斷題】變長碼采用非續(xù)長碼，力求使信息含量效率最小，冗余度最大。本題答案：【錯誤】23、【判斷題】對于一個碼，若每個碼字都與惟一的一個信源符號相對應(yīng)，則該碼為惟一可譯碼。本題答案：【錯誤】24、【判斷題】定長非奇異碼肯定是惟一可譯碼。本題答案：【正確】25、【判斷題】非續(xù)長碼中任一碼字都不是其他碼字的前綴。本題答案：【正確】26、【判斷題】有效的信源編碼可使輸出碼元概率均勻化。本題答案：【正確】27、【判斷題】無失真信源編碼也就是熵壓縮編碼。本題答案：【錯誤】28、【填空題】變長碼采用非續(xù)長碼，力求使冗余度。本題答案：【最小##%_YZPRLFH_%##最低】29、【填空題】將一個碼標(biāo)在碼樹上，如果其所有碼字均處于節(jié)點上，則該碼為非續(xù)長碼。本題答案：【終端】30、【填空題】編碼效率高意味著平均碼長。本題答案：【短】5.1-5.6第5章單元測試1、【單選題】關(guān)于“重復(fù)N次”編碼，說法不正確的是_____。本題答案：【N越大，信息傳輸率越高】2、【單選題】下列未必是信道譯碼的最佳譯碼規(guī)則的是_____。本題答案：【極大似然譯碼規(guī)則】3、【單選題】對2元信源U的長度為2的符號串進行編碼，取碼長為N=3，則_____。本題答案：【信息率R=2/3】4、【單選題】譯碼規(guī)則不能由_____確定。本題答案：【邊緣概率】5、【單選題】假設(shè)，信道線圖如下圖所示，相應(yīng)的最佳譯碼規(guī)則為_____。本題答案：【】6、【單選題】下列說法不正確的是_____.本題答案：【應(yīng)用極大似然譯碼規(guī)則總可以確定譯碼的平均差錯率】7、【單選題】下列譯碼規(guī)則中未必能使平均差錯率達到最小的譯碼規(guī)則稱為。本題答案：【極大似然譯碼規(guī)則】8、【單選題】增加信道編碼中信息位的長度能提高。本題答案：【信息率】9、【單選題】增加信道編碼中監(jiān)督碼的長度能減少。本題答案：【平均差錯率】