信息论与编码实验报告
求信息量的流程图:开始
获取离散信息源参 数 P(X)和 P(Y/X)
计 算 联 合 概 率 P(xiyj)=P(xi)*P(yj/xi)
计 算 P(yj) 及 后 验 概 率 P(xi/yj)=P(xiyj)/P(yj)
根据定义求信源 熵 H(X)和 H(Y)
根据定义求条件熵 H(X/Y)和 H(Y/X)
根据定义求联合 熵 H(XY)
求 交 互 熵 I(X;Y)=H(X)+H(Y)-H(XY)
输出已知条件、信 源熵、条件熵、联 合熵和交互熵
求信道容量 C (不会)