(1)證明對有限方差σ2,高斯隨機(jī)變量具有所有隨機(jī)變量可能獲得的最大微分熵。 (2)證明該熵由公式給出。
σ2;高斯分布;正態(tài)分布;;
有兩個二元隨機(jī)變量X和Y,它們的聯(lián)合概率為P[X=0,Y=0]=1/8,P[X=0,Y=1]=3/8,P[X=1,Y=1]=1/8,P[X=1,Y=0]=3/8。定義另一隨機(jī)變量Z=XY,試計算:H(X),H(Y),H(Z),H(XZ),H(YZ),H(XYZ)
已知加性高斯白噪聲(AWGN,Add itiveWhite Gaussian Noise)信道,信號的帶寬范圍為300~3400Hz,信號與噪聲功率比為26dB, (1)計算該信道的最大信息傳輸速率; (2)若信號與噪聲功率比降到10dB,且保持信道最大信息傳輸速率不變,則信道帶寬應(yīng)該變?yōu)槎嗌伲?/p>
信息是事物運(yùn)動狀態(tài)或存在方式的不確定性的描述。