某信源發(fā)送端有2個(gè)符號,xi,i=1,2;p(xi)=a,每秒發(fā)出一個(gè)符號。接受端有3種符號yi,j=1,2,3,轉(zhuǎn)移概率矩陣為。 (1)計(jì)算接受端的平均不確定度; (2)計(jì)算由于噪聲產(chǎn)生的不確定度H(Y|X);
(3)計(jì)算信道容量。
設(shè)二元對稱信道的傳遞矩陣為 (1)若P(0)=3/4, P(1)=1/4,求H(X),H(X/Y),H(Y/X)和I(X;Y); (2)求該信道的信道容量及其達(dá)到信道容量時(shí)的輸入概率分布。
有一離散無記憶信源,其輸出為X∈{0,1,2},相應(yīng)的概率為p0=1/4,p1=1/4,p2=1/2,設(shè)計(jì)兩個(gè)獨(dú)立的實(shí)驗(yàn)去觀察它,其結(jié)果分別為Y1∈{0,1},Y2∈{0,1},已知條件概率: (1)求I(X;Y1)和I(X;Y2),并判斷哪一個(gè)實(shí)驗(yàn)好些 (2)求I(X;Y1Y2),并計(jì)算做Y1和Y2兩個(gè)實(shí)驗(yàn)比做Y1和Y2中的一個(gè)實(shí)驗(yàn)可多得多少關(guān)于X的信息 (3)求I(X;Y1|Y2)和I(X;Y2|Y1),并解釋它們的含義