概率論與數(shù)理統(tǒng)計課件:14-4 限維概率分布_第1頁
概率論與數(shù)理統(tǒng)計課件:14-4 限維概率分布_第2頁
概率論與數(shù)理統(tǒng)計課件:14-4 限維概率分布_第3頁
概率論與數(shù)理統(tǒng)計課件:14-4 限維概率分布_第4頁
概率論與數(shù)理統(tǒng)計課件:14-4 限維概率分布_第5頁
已閱讀5頁,還剩18頁未讀 繼續(xù)免費閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)

文檔簡介

1、 三.有限維概率分布 馬爾可夫鏈X(t),t= t0, t0, t0, 在初始時刻t0的概率分布:稱為初始分布.初始分布與轉(zhuǎn)移概率完全地確定了馬爾可夫鏈的任何有限維分布. Pj(t0) = PjX(t0)=j, j=0,1,2, 定理:設(shè)齊次馬爾可夫鏈 X(n),n= 0, 1, 2, 的狀態(tài)空間 S= 0, 1, 2, , i, 則對任意 n 個非負整數(shù)k1 k2 kn和S內(nèi)的任意n個狀態(tài)j1, j2, , jn ,有證由概率的乘法公式和馬爾可夫性由全概率公式,上式等號右端第一因式化為證畢于是得到例6在本節(jié)例5中,設(shè)初始時輸入0和1的概率分別為1/3和2/3,求第2、3、6步都傳輸出1的概率

2、.解由題設(shè)知故馬爾可夫鏈在任何時刻 tn 的一維概率分布又稱為絕對概率,或稱為瞬時概率.由全概率公式得如果馬爾可夫鏈具有齊次性,那么上式化為由上式遞推得到式中t0是初始時刻.寫成向量形式得n步轉(zhuǎn)移概率矩陣 上式表明:齊次馬爾可夫鏈在時刻tn的瞬時概率完全地由初始分布和 n步轉(zhuǎn)移概率所確定. 例7本節(jié)例2中,設(shè)質(zhì)點在初始時刻 t0恰處在狀態(tài)2, 試求在t2時刻,質(zhì)點處在各個狀態(tài)的概率.即:已知:=(0,0,1,0,0)故:=(0,0,1,0,0)或者(解2)四.平穩(wěn)分布如果一維分布 pj (tn)與 tn無關(guān),即:此時:對于齊次馬爾可夫鏈即:定義4 對于齊次馬爾可夫鏈X(t),t= t0, t1

3、, t2, ,如果存在概率分布 pj ,j=0,1,2, 滿足則稱pj ,j=0,1,2, 為平穩(wěn)分布,于是有稱X(t)具有平穩(wěn)性,是平穩(wěn)齊次馬爾可夫鏈.即:另外有: 此時:定理 如果齊次馬爾可夫鏈X(t),t= t0, t1, t2, ,的初始分布 是一個平穩(wěn)分布,則 設(shè)齊次馬爾可夫鏈 X(n),n= 0, 1, 2, 的轉(zhuǎn)移概率矩陣為例8 且初始概率分布為(1)求(2)求(3)求平穩(wěn)分布解(1)(2)(3)平穩(wěn)分布(P1,P2,P3)滿足即:解之得故平穩(wěn)分布為帶一個反射壁的一維隨機游動,以 X(tn) =j表示在時刻 tn粒子處于j狀態(tài),狀態(tài)空間S=0,1,2, ,j,轉(zhuǎn)移概率求平穩(wěn)分布 例9 解根據(jù)題設(shè)條件,知轉(zhuǎn)移概率矩陣平穩(wěn)分布應(yīng)滿足轉(zhuǎn)移概率即應(yīng)滿足由(1)得(4),由(2)得得到(5

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責。
  • 6. 下載文件中如有侵權(quán)或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論