应《网络安全法》要求，自2017年10月1日起，未进行实名认证将不得使用互联网跟帖服务。为保障您的帐号能够正常使用，请尽快对帐号进行手机号验证，感谢您的理解与支持！

24小时热门版块排行榜    

CyRhmU.jpeg
小木虫论坛-学术科研互动平台 » 计算模拟区 » 仿真模拟 » 其他 » 【讨论】多输出神经网络的问题
51/1返回列表
查看: 515  |  回复: 16
只看楼主@他人 存档 新回复提醒 (忽略) 收藏    在APP中查看
当前主题已经存档。
当前只显示满足指定条件的回帖，点击这里查看本话题的所有回帖

728728

木虫 (正式写手)

[交流] 【讨论】多输出神经网络的问题

相同的样本，一个多输入多输出神经网络和对若干个多输入单输出神经网络，哪个误差小一些？
回复此楼

» 猜你喜欢
1楼2009-12-10 23:17:05
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

nono2009

超级版主 (文学泰斗)

No gains, no pains.

优秀区长优秀区长优秀区长优秀区长优秀版主
引用回帖:
Originally posted by 728728 at 2009-12-11 17:39:


呃，nono你弄反了。我的意思是样本集一样的情况下，trade-off的结果不一定变差。。。

关键是考虑偶上面的第二段话
引用回帖:
如果你的case学出来结果相反，那只能表明你的MISO网络还可以更好。我们这么来讲，你学好的MIMO网络，可以被简单分解为M个MISO网络，保持那些相关的连接权不变。那么，这时候你的MISO网络应该给出与MIMO完全一样的结果。以此MISO网络的连接权为初始值，进一步训练之，就完全可能获得更优的结果。
赞一下 回复此楼
10楼2009-12-11 17:42:52
 已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
查看全部 17 个回答

nono2009

超级版主 (文学泰斗)

No gains, no pains.

优秀区长优秀区长优秀区长优秀区长优秀版主
★
小木虫(金币+0.5):给个红包，谢谢回帖交流
偶做过。在偶的case里，只要训练的好，结果差不多。

但从理论上讲，将一个MIMO网络改成M个MISO网络分别训练，误差应该更小、训练效率也更高。
赞一下(1人) 回复此楼
2楼2009-12-11 09:33:48
 已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

728728

木虫 (正式写手)
引用回帖:
Originally posted by nono2009 at 2009-12-11 09:33:
偶做过。在偶的case里，只要训练的好，结果差不多。

但从理论上讲，将一个MIMO网络改成M个MISO网络分别训练，误差应该更小、训练效率也更高。

有理论的参考资料吗？我做的结论跟你不太一样，现在不确定是否能算例有关。
赞一下 回复此楼
3楼2009-12-11 16:10:52
 已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

nono2009

超级版主 (文学泰斗)

No gains, no pains.

优秀区长优秀区长优秀区长优秀区长优秀版主
★
小木虫(金币+0.5):给个红包，谢谢回帖交流
其实很简单，当输出只有一个的时候，所有的连接权都被用于学习该输出，最flexible。当输出多于一个时，至少输入层与隐层之间的连接权是所有输出共享的，中间必然有trade-off，导致最后误差的上升。

如果你的case学出来结果相反，那只能表明你的MISO网络还可以更好。我们这么来讲，你学好的MIMO网络，可以被简单分解为M个MISO网络，保持那些相关的连接权不变。那么，这时候你的MISO网络应该给出与MIMO完全一样的结果。以此MISO网络的连接权为初始值，进一步训练之，就完全可能获得更优的结果。
赞一下(1人) 回复此楼
4楼2009-12-11 16:50:32
 已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
查看全部 17 个回答
普通表情 龙 兔 虎 猫 高级回复(可上传附件)
信息提示
关闭
请填处理意见
关闭