練習(xí):設(shè)某地有1600戶居民，某產(chǎn)品只有甲、乙、丙3廠家在該地銷售。經(jīng)調(diào)查，8月份買甲、乙、丙三廠的戶數(shù)分別為480，320，800。9月份里，原買甲的有48戶轉(zhuǎn)買乙產(chǎn)品，有96戶轉(zhuǎn)買丙產(chǎn)品；原買乙的有32戶轉(zhuǎn)買甲產(chǎn)品，有64戶轉(zhuǎn)買丙產(chǎn)品；原買丙的有64戶轉(zhuǎn)買甲產(chǎn)品，有32戶轉(zhuǎn)買乙產(chǎn)品。用狀態(tài)1、2、3分別表示甲、乙、丙三廠，則其轉(zhuǎn)移概率矩陣為（）B．C．D．A．2021/5/910.50.50.5120.513練習(xí):設(shè)馬氏鏈的狀態(tài)空間為I={1，2，3}，其狀態(tài)轉(zhuǎn)移圖如下:試寫出一步轉(zhuǎn)移矩陣：

2021/5/92練習(xí):設(shè)馬氏鏈的狀態(tài)空間為I={1，2，3，4}，其一步轉(zhuǎn)移矩陣為畫出狀態(tài)轉(zhuǎn)移圖.10.60.20.20.71120.33412021/5/93練習(xí)設(shè)今日有雨，則明日也有雨的概率為0.7，今日無雨明日有雨的概率為0.5，求星期一有雨，星期三也有雨的概率。解:其為有兩個狀態(tài)的馬爾可夫鏈，有雨記為1，無雨記為0，一步轉(zhuǎn)移概率矩陣為2021/5/94課前練習(xí)：1、設(shè)馬氏鏈的狀態(tài)空間為{1,2,3},一步轉(zhuǎn)移矩陣為2、設(shè)馬氏鏈的狀態(tài)空間為{1,2,3,4},一步轉(zhuǎn)移矩陣為試研究其狀態(tài)關(guān)系.2021/5/95例設(shè)馬氏鏈的狀態(tài)空間為{1,2,3},一步轉(zhuǎn)移矩陣為解:狀態(tài)轉(zhuǎn)移圖如下:①②③2021/5/96①②③因此,狀態(tài)1和2為非常返態(tài),狀態(tài)3為常返態(tài).2021/5/97設(shè)馬氏鏈的狀態(tài)空間為{1,2,3,4},一步轉(zhuǎn)移矩陣為試研究其狀態(tài)關(guān)系.解:狀態(tài)轉(zhuǎn)移圖如下:①②③④例2021/5/982021/5/99故狀態(tài)1與2都是正常返狀態(tài),又因周期都是1,故都為遍歷狀態(tài).故狀態(tài)3是非常返狀態(tài).故狀態(tài)4是吸收狀態(tài).2021/5/9101、設(shè)馬氏鏈的狀態(tài)空間為{1,2},一步轉(zhuǎn)移矩陣為課前練習(xí)：2、設(shè)馬氏鏈的狀態(tài)空間I={1，2，3}，其一步轉(zhuǎn)移矩陣為則此鏈具有遍歷性，試求其平穩(wěn)分布。2021/5/911例設(shè)馬氏鏈的狀態(tài)空間為{1,2},一步轉(zhuǎn)移矩陣為解:2021/5/912則此鏈具有遍歷性，試求其平穩(wěn)分布。例設(shè)馬氏鏈的狀態(tài)空間I={1，2，3}，其一步轉(zhuǎn)移矩陣為解：2021/5/913所以馬氏鏈X1232021/5/914例在直線上帶有反射壁的隨機游走,只考慮質(zhì)點取1,2,3三個點,一步轉(zhuǎn)移矩