24小时热门版块排行榜    

查看: 757  |  回复: 3

qq1007883286

金虫 (小有名气)

[求助] 求信息通信领域大神~关于信息熵在贝叶斯框架中的应用 已有1人参与

根据信息熵的性质和贝叶斯公式,有如下推论:
H(Y|X)=H(X|Y)+H(Y)-H(X)
当X为data的时候,H(X|Y)是否有意义啊,怎样计算呢?因为信息熵不是表示随机变量的不确定性,这里X已经是确定的值了
回复此楼

» 猜你喜欢

已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

我也不吃亏

新虫 (正式写手)

2楼2016-12-20 17:50:17
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

qq1007883286

金虫 (小有名气)

引用回帖:
2楼: Originally posted by 我也不吃亏 at 2016-12-20 17:50:17
随机信号?

就是当X不是随机变量时,而是X=Xi(Xi为观测到的数据),这个等式仍然成立么?
3楼2016-12-20 18:52:02
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

syddesk

木虫 (正式写手)

【答案】应助回帖

感谢参与,应助指数 +1
就这个问题而言,还是有意义的。
你写出的公式中,对于X,虽然只是一些数据,但是还是满足一定的离散分布的,也就是说X是一个离散变量。对于Y,应该也有一个相应的离散分布。
而且熵的定义就是关于分布的。
当你确定你做的东西是一个x_i的时候就没什么意义了,因为你有所有的数据,你知道y_i之后相应的x_{i}就知道了,不存在任何不确定性
4楼2016-12-20 20:07:47
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 学员DqqZQC 的主题更新
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[考研] 招08考数学 +4 laoshidan 2026-03-20 11/550 2026-03-23 08:47 by laoshidan
[考研] 328求调剂,英语六级551,有科研经历 +6 生物工程调剂 2026-03-17 10/500 2026-03-22 20:22 by edmund7
[考研] 315分,诚求调剂,材料与化工085600 +3 13756423260 2026-03-22 3/150 2026-03-22 20:11 by edmund7
[考研] 275求调剂 +6 shansx 2026-03-22 8/400 2026-03-22 15:27 by barlinike
[考研] 305分求调剂(食品工程) +4 Sxy112 2026-03-21 6/300 2026-03-22 15:26 by 无懈可击111
[考研] 求调剂院校信息 +6 CX 330 2026-03-21 6/300 2026-03-22 15:25 by 无懈可击111
[考博] 招收博士1-2人 +3 QGZDSYS 2026-03-18 4/200 2026-03-22 10:25 by QGZDSYS
[考研] 生物学一志愿985,分数349求调剂 +4 zxts12 2026-03-21 7/350 2026-03-22 09:57 by zxts12
[考研] 广西大学材料导师推荐 +3 夏夏夏小正 2026-03-17 5/250 2026-03-21 22:20 by 金昊ML
[考研] 化学调剂 +5 yzysaa 2026-03-21 5/250 2026-03-21 22:12 by peike
[考研] 0703化学调剂 +4 妮妮ninicgb 2026-03-21 4/200 2026-03-21 18:39 by 学员8dgXkO
[考研] 0703化学297求调剂 +3 Daisy☆ 2026-03-20 3/150 2026-03-21 17:45 by ColorlessPI
[考研] 265求调剂 +12 梁梁校校 2026-03-19 14/700 2026-03-21 13:38 by lature00
[考研] 085601调剂 358分 +3 zzzzggh 2026-03-20 4/200 2026-03-21 10:21 by luoyongfeng
[考研] 316求调剂 +6 梁茜雯 2026-03-19 6/300 2026-03-21 06:32 by Ecowxq666!
[考研] 一志愿中海洋材料工程专硕330分求调剂 +8 小材化本科 2026-03-18 8/400 2026-03-20 23:16 by JourneyLucky
[考研] 求调剂 +3 @taotao 2026-03-20 3/150 2026-03-20 19:35 by JourneyLucky
[考研] 261求B区调剂,科研经历丰富 +3 牛奶很忙 2026-03-20 4/200 2026-03-20 19:34 by JourneyLucky
[考研] 材料与化工专硕调剂 +7 heming3743 2026-03-16 7/350 2026-03-20 19:31 by zhukairuo
[考研] 085600材料与化工求调剂 +6 绪幸与子 2026-03-17 6/300 2026-03-19 13:27 by houyaoxu
信息提示
请填处理意见