信息論實(shí)驗(yàn)指導(dǎo)書(shū)

標(biāo)準(zhǔn)檔24、實(shí)驗(yàn)過(guò)程中要認(rèn)真記錄實(shí)驗(yàn)結(jié)果，仿真結(jié)果需經(jīng)指導(dǎo)教師審閱。告的容。2實(shí)驗(yàn)一離散信源的自信息量和嫡 2實(shí)驗(yàn)一：計(jì)算離散信源的自信息量和爛率分布的自信息量以及信源爛的訃算。一個(gè)字符它所攜帶的信息量是和該字符岀現(xiàn)的概率有關(guān)，概率可以表征自信息第二、當(dāng)事件發(fā)生后，標(biāo)是該事件所提供的信息量.q1q。(1)信息嫡是表征信源本身統(tǒng)訃特性的一個(gè)物理量，它表示信源的平均不確定性，是信源輸出的每一個(gè)消息所能提供的平均信息量；自信息量表示的是每一個(gè)2(3)若信道無(wú)干擾，接收者獲得的信息量在數(shù)量上等于信源的爛，若有干擾時(shí)，打開(kāi)空白的M文件編輯器，將上述程序輸入。保存。通過(guò)M文件調(diào)用的形式完成H=H+打開(kāi)空白的M文件編輯器，將上述程序輸入。保存。通過(guò)M文件調(diào)用的形式完成H=H+21414I1314乙地信源空間為:55388六.實(shí)驗(yàn)報(bào)告要求總結(jié)離散信源的特點(diǎn)及離散信源平均信息量的計(jì)算，寫出實(shí)驗(yàn)容中的仿真程序考題中MATLAB實(shí)現(xiàn)語(yǔ)句，并附上仿真實(shí)現(xiàn)的結(jié)果。2實(shí)驗(yàn)二最大離散爛定理2掌握最大嫡定理。概率分布的順序是可以任意互換的，互換后的概率分布表示的是相同的隨機(jī)變明燔函數(shù)只與信源的總體統(tǒng)計(jì)特性有關(guān)。這也說(shuō)明，信息爛只抽取了信源信息輸出它不能描述時(shí)間本身的具體含義和主觀價(jià)值等。負(fù)性4、擴(kuò)展性雖然小概率事件的出現(xiàn)給予接收者的信息量很大，但在嫡的汁算中，它占的比重很小，可以忽略不計(jì)，這也是嫡的總體平均性的體現(xiàn)。毀PL，PKKPW，PJ6、遞增性2項(xiàng)是由于劃分產(chǎn)生的不確定性。7、極值性上式中，當(dāng)且僅當(dāng)n個(gè)離散消息等概率出現(xiàn)時(shí)等式成立。這一性質(zhì)說(shuō)明，對(duì)不同概率分布()所構(gòu)成的嫡，只有當(dāng)?shù)雀怕史植紩r(shí)，信源的不確定性最大,爛達(dá)到pX19、唯一性用點(diǎn)乘：2、帀同和的方法畫(huà)出三元信源空間的爛函數(shù)與概率分布的三維曲線圖。仿真結(jié)果2H五.思考題六.實(shí)驗(yàn)報(bào)告要求析。2驗(yàn)三費(fèi)諾編碼2、按編碼進(jìn)制數(shù)將概率分組，使每組概率和盡可能接近或相等;H州X?Xx對(duì)給定信源H州X?Xx編碼，通過(guò)MATLAB進(jìn)行編碼過(guò)程仿真，并計(jì)算平均碼長(zhǎng)。22QQBAEND進(jìn)行二進(jìn)制費(fèi)諾進(jìn)行二進(jìn)制費(fèi)諾六、實(shí)驗(yàn)報(bào)告要求x實(shí)驗(yàn)四霍夫曼編碼2、在分配碼字長(zhǎng)度時(shí)，首先將出現(xiàn)概率最小的兩個(gè)符號(hào)的概率相加合成一個(gè)23、把這個(gè)合成概率看成是一個(gè)新組合符號(hào)的概率，重復(fù)上述做法直到最后只4、完成以上概率順序排列后，再反過(guò)來(lái)逐步向前進(jìn)行編碼，每一次有二個(gè)分對(duì)給定信源[X卜勺?"小觀和進(jìn)行二進(jìn)制霍夫曼編碼，通過(guò)MATLAB進(jìn)行編碼過(guò)程仿真，并訃算平均碼長(zhǎng)。程序如下：22END1=END;AEND進(jìn)進(jìn)行二進(jìn)制霍夫。六、實(shí)驗(yàn)報(bào)告要求2驗(yàn)五香農(nóng)編碼給定某個(gè)信源符號(hào)的概率分布，通過(guò)以下的步驟進(jìn)行香農(nóng)編碼2、確定滿足下列不等式的整數(shù)碼長(zhǎng)&；。HX\X2乃無(wú)兀5尤6"對(duì)給定信源