24小时热门版块排行榜    

CyRhmU.jpeg
查看: 1329  |  回复: 6

syulzh

铜虫 (正式写手)

[交流] 《信息论与编码》第二版,傅祖芸编,问题汇总已有2人参与

非通信方向,但近日准备学习《信息论与编码》这门课,请教各位一个问题,如下。

陈运 编的《信息论与编码》第2版,2007年印刷,其中第12页【例2.1.2】,后验概率为何是p(a2|b1)=1/2,p(a3|b1)=1/4,p(a4|b1)=1/4?   

由于晴天的概率为1/2,所以非晴天(阴雨雪)的概率也是1/2,当得知‘不是晴天’时,说明非晴天的概率为1,意味着非晴天(阴雨雪)的概率翻倍了,所以都乘以2.        莫非是这样理解的???

初学者,请各位赐教。谢谢!
《信息论与编码》第二版,傅祖芸编,问题汇总
1.jpg
回复此楼
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

syddesk

木虫 (正式写手)


小木虫: 金币+0.5, 给个红包,谢谢回帖
其实不是这么理解的,可以发现原概率的比例是4:2:1:1, 后来由于知道不是晴天,但是通过不是晴天只能排除掉1/2的概率。知道不是晴天,对于后面三种天气的2:1:1没有任何作用,所以这个比例没有任何变化,后验概率的和应该为1,即全部可能事件的概率为1
2楼2016-04-15 04:39:31
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

syulzh

铜虫 (正式写手)

引用回帖:
2楼: Originally posted by syddesk at 2016-04-15 04:39:31
其实不是这么理解的,可以发现原概率的比例是4:2:1:1, 后来由于知道不是晴天,但是通过不是晴天只能排除掉1/2的概率。知道不是晴天,对于后面三种天气的2:1:1没有任何作用,所以这个比例没有任何变化,后验概率的和 ...

非常感谢,的确如此
3楼2016-04-15 08:33:06
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

xiexiangyan

银虫 (小有名气)


小木虫: 金币+0.5, 给个红包,谢谢回帖
以前学过,现在都忘得干干净净了

发自小木虫Android客户端
4楼2016-04-17 16:02:56
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

syulzh

铜虫 (正式写手)

引用回帖:
2楼: Originally posted by syddesk at 2016-04-15 04:39:31
其实不是这么理解的,可以发现原概率的比例是4:2:1:1, 后来由于知道不是晴天,但是通过不是晴天只能排除掉1/2的概率。知道不是晴天,对于后面三种天气的2:1:1没有任何作用,所以这个比例没有任何变化,后验概率的和 ...

再请教一个问题,第35页的n元信源的熵函数递推变化,实在想不明白了,请问那个2元递推公式是怎么得到的?
谢谢
《信息论与编码》第二版,傅祖芸编,问题汇总-1
2.jpg

5楼2016-04-19 21:18:52
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

syddesk

木虫 (正式写手)


小木虫: 金币+0.5, 给个红包,谢谢回帖
引用回帖:
5楼: Originally posted by syulzh at 2016-04-19 21:18:52
再请教一个问题,第35页的n元信源的熵函数递推变化,实在想不明白了,请问那个2元递推公式是怎么得到的?
谢谢

2.jpg
...

我只看过英文版的教材,中文版的没看过。
不过我可以和你说一下推导过程,H(n)是n项相加,把n-1和n单独写出来,就成了前n-2项加上n-1加上n, 然后加上(pn+pn+1)*log(...),然后减去同样的一项,等式依然成立,然后你就有了H(n-1)里面的所有东西,最后对剩下的三项进行整理,你就能得到最后的公式了
6楼2016-04-20 16:32:08
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

syulzh

铜虫 (正式写手)

引用回帖:
6楼: Originally posted by syddesk at 2016-04-20 16:32:08
我只看过英文版的教材,中文版的没看过。
不过我可以和你说一下推导过程,H(n)是n项相加,把n-1和n单独写出来,就成了前n-2项加上n-1加上n, 然后加上(pn+pn+1)*log(...),然后减去同样的一项,等式依然成立,然 ...

朋友,真的太感谢你了,你的指点,真的如醍醐灌顶
7楼2016-04-20 20:04:06
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 syulzh 的主题更新
普通表情 高级回复(可上传附件)
信息提示
请填处理意见