02 无损数据压缩(5)

2.1数据压缩的基本原理和方法从信息量的定义可以看出，信息是事件aj的不确定因素 的度量。事件发生的概率越大，事件的信息量越小；反之， 一个发生可能性很小的事件，携带的信息量就很大，甚至 使人们“震惊”。

例如：在32个数码中任选1个数码时，设每个数码选中 的概率是相等的，则1 P(a j ) 32

那么，任一数码的信息量为

1 I (a j ) lb lb25 5 bit 32