考虑MIMO信道的一般表达式:
$$Y= HX +N \qquad (1)$$
其中
$$X-H_t \times 1 $$
$$Y-H_r \times 1 $$
$$ X,N- i.i.d Gaussian Distribution$$
同时定义
$$ R_{xx}= E[XX^H] $$
$$ R_{nn}= E[NN^H] = \sigma ^2 I_{Nr}$$
$$ R_{yy}= E[YY^H]= HR_{xx}H^H+ \sigma ^2 I_{Nr}$$
那么 $P=tr(R_{xx})$ 为发射信号总功率,$H(Y|X)= H(HX+N|X) = H(N|X)= H(N)$ 并且
$$C= \arg max \quad I(X,Y)= H(Y)-H(N)$$
当信道AWGN信道时,信源X服从高斯分布时$I(X,Y)$取得最大值,此时接收信号Y也服从高斯分布。
(1) 考虑一维连续高斯分布,此时需要计算连续信息熵 (微分熵), 假设 $X \sim \phi (0, \sigma) = (1/\sqrt {2 \pi \sigma ^2}) e^{-x^2/2 \sigma ^2}$
可计算得到微分熵
$$ h(X) = - \int x \ln x dx $$
$$\qquad = - \int \phi [- \frac {-x^2}{2\sigma ^2}-ln \sqrt {2\pi \sigma ^2}]dx $$
$$\qquad = \frac {E[X^2]}{2 \sigma ^2} + \frac