自信量

自信量是資訊理論的一個概念,也是信源符號機率分布的函式。

解釋

自信量是資訊理論的一個概念，用以表示信源符號的信息量
I(a) = 【接收到符號a之前，對a的不確定性】
自信量是信源符號機率分布的函式，這一函式又稱為自信函式：
I(a) = f(p(a))
自信函式需要滿足以下性質：
1）任何事物的信息量大於0
2）不可能發生的事，發生了，其信息量是無窮大
3）一定發生的事，信息量為0，因為大家都知道（比如太陽從東邊升起）
4)若p(a) >p(b),則I(a) < I(b)
滿足以上性質的連續函式,之有一個,就是
I(a) = - logp(a)

相關條目

數學