資訊理論與編碼怎麼求信源熵?

來源:酷知科普網 9.56K

資訊理論與編碼是電子資訊工程類專業必須要學習的一門課程,其中裡面有一節知識講的就是馬爾剋夫鏈。下面小編就來跟大家講講怎麼求一階馬爾剋夫信源的信源熵,希望對大家有所幫助。

資訊理論與編碼怎麼求信源熵?

操作方法

(01)首先要理解題目的意思,判斷出該題的信源為一階馬爾剋夫信源。

資訊理論與編碼怎麼求信源熵? 第2張

(02)接著根據題意,寫出信源的狀態轉換圖,一定要細心,否則後面的都會錯。

資訊理論與編碼怎麼求信源熵? 第3張

(03)然後設出狀態極限概率分別為p(a),p(b),p(c)。

資訊理論與編碼怎麼求信源熵? 第4張

(04)接下來根據切普曼—柯爾莫哥洛夫方程,列出相關表示式。

資訊理論與編碼怎麼求信源熵? 第5張

(05)然後把Q(a),Q(b),Q(c)求出來,如下圖所示。

資訊理論與編碼怎麼求信源熵? 第6張

(06)接著寫出信源熵的公式。

資訊理論與編碼怎麼求信源熵? 第7張

(07)最後把信源熵求出來,如圖所示。

資訊理論與編碼怎麼求信源熵? 第8張
熱門標籤