涉及概率,求信息量一消息由0、1、2、3四种符号组成,各符号出现概率分别为3/8,1/4,1/4和1/8.消息总长57个符号,其中0出现23次,1出现14次,2出现13次,3出现7次.求该消息的信息量

Question

涉及概率,求信息量
一消息由0、1、2、3四种符号组成,各符号出现概率分别为3/8,1/4,1/4和1/8.消息总长57 个符号,其中0出现23次,1出现14次,2出现13次,3出现7次.
求该消息的信息量

Answer 1

通信原理的题目啊
每个字符的信息量为
log(2)⁡出现概率的倒数乘以字符出现次数
所以总信息量为
23*log(2)8/3+14*log(2)4+13*log(2)4+7*log(2)8=108(bit)