24小时热门版块排行榜    

查看: 3336  |  回复: 11

bbslover

金虫 (正式写手)

[交流] 【求助】如何判断是否过拟合(overfitting)? 已有5人参与

1,如何判断过拟合呢,有什么判断指标吗?比如  训练集的R2,验证集的Q2,还有独立外部测试集的R2都应该是多少时候,预测的模型可以接受? 他们得到的值多少时候表示过拟合呢? 比如说 训练集的R2=0.949341 ,但是独立的外部测试集的R2=0.700425 ,这样属于过拟合吗?
2,单独从散点图能看出是否过拟合吗?
3.,这张图片是我得到的实验值和预测值的三点图,训练集的R2=0.94,独立测试集的R2=0.70,这张图能看出过拟合吗? 对这张图还有什么可以改进的地方?

谢谢!


[ Last edited by bbslover on 2010-5-9 at 20:46 ]
回复此楼

» 猜你喜欢

» 本主题相关价值贴推荐,对您同样有帮助:

已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

yalefield

金虫 (文坛精英)

老汉一枚

★ ★ ★
小木虫(金币+0.5):给个红包,谢谢回帖交流
ghcacj(金币+2):谢谢 2010-05-10 08:19:27
(1)X轴、Y轴的起点、终点、单位长度都要一致;是否从零点开始?
(2)训练集明显呈现两条线,说明训练集的样本完全可以分为两组,而不应该强制性地捏和为一组来建模。
2楼2010-05-09 23:44:14
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

tjegg

铁杆木虫 (著名写手)


小木虫(金币+0.5):给个红包,谢谢回帖交流
正在学习中,支持一下。
除了你的亲人,没有人应该对你好,对你好的人,一定要珍惜。
3楼2010-05-10 06:32:56
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

bbslover

金虫 (正式写手)

引用回帖:
Originally posted by yalefield at 2010-05-09 23:44:14:
(1)X轴、Y轴的起点、终点、单位长度都要一致;是否从零点开始?
(2)训练集明显呈现两条线,说明训练集的样本完全可以分为两组,而不应该强制性地捏和为一组来建模。

谢谢老汉的回答,但是训练集如何再分为两组呢?
要是分两组的话,是不是分别再建模,然后分别再预测那个外部测试集?

还有,就我得到的结果来看,是否过拟合呢?

[ Last edited by bbslover on 2010-5-10 at 08:39 ]
4楼2010-05-10 08:38:23
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

yalefield

金虫 (文坛精英)

老汉一枚

★ ★
小木虫(金币+0.5):给个红包,谢谢回帖交流
ghcacj(金币+1):谢谢 2010-05-10 09:43:41
引用回帖:
Originally posted by bbslover at 2010-05-10 08:38:23:
但是训练集如何再分为两组呢?

仁者见仁
引用回帖:
要是分两组的话,是不是分别再建模,然后分别再预测那个外部测试集?

那当然。
引用回帖:
还有,就我得到的结果来看,是否过拟合呢?

目前无法回答。
5楼2010-05-10 09:11:50
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

bbslover

金虫 (正式写手)

好的 多谢 指导
6楼2010-05-10 09:44:02
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

tingjun

木虫 (小有名气)

★ ★ ★
小木虫(金币+0.5):给个红包,谢谢回帖交流
lei0736(金币+2):谢谢 2010-05-11 20:13:52
最好用RMSE和AARD来比较一下训练集和测试集,这两个值分别都接近的话,模型应该还行,最好是分两组
7楼2010-05-11 20:00:27
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

zlp-lw

木虫 (正式写手)


小木虫: 金币+0.5, 给个红包,谢谢回帖
请问假如训练集成上面的一条直线,而测试集不像训练集那样的集中而是分散,能说明模型的好坏吗?我正在学习,希望大牛们指导指导,谢谢。。。。
8楼2012-10-23 16:49:00
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

bbslover

金虫 (正式写手)

引用回帖:
1274473楼: Originally posted by zlp-lw at 2012-10-23 16:49:00
请问假如训练集成上面的一条直线,而测试集不像训练集那样的集中而是分散,能说明模型的好坏吗?我正在学习,希望大牛们指导指导,谢谢。。。。

其实,最终还是看结果的。建议看 beware of q2这篇论文,如果你的统计结果达到他们建议的要求,就相当好了。
9楼2012-10-23 20:05:17
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

zlp-lw

木虫 (正式写手)


小木虫: 金币+0.5, 给个红包,谢谢回帖
那篇文献我看了,就用文献中的方法验证,所得的训练集和测试集的R2分别为0.9215,0.6917;q2分别为0.9240,0.5993;RMSE分别为0.0653,0.6610。我的预测结果中,测试集的验证没有训练集的好,请问是什么原因引起的?谢谢。。。。
10楼2012-10-24 13:23:19
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 bbslover 的主题更新
普通表情 高级回复 (可上传附件)
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[基金申请] 时间戳变了,能看出什么问题? +16 基诺咪客 2026-08-17 20/1000 2026-08-20 12:44 by 201120518022
[基金申请] 重要消息,中午系统在维护 +11 yuleib84 2026-08-18 12/600 2026-08-20 11:09 by xskun
[基金申请] 哪位老哥知道今年的国自然具体哪一天放榜? +16 Ldrop2023 2026-08-13 20/1000 2026-08-20 11:07 by xskun
[基金申请] 言之凿凿,8月21号(明天)放榜 +12 医学老男孩 2026-08-20 14/700 2026-08-20 10:53 by ran2233
[基金申请] 今天基金会出结果吗?20260819 +14 kkkl_v 2026-08-19 15/750 2026-08-20 08:21 by sunzitan
[基金申请] filecode,4个jtjc了 +11 ziyangfang 2026-08-19 13/650 2026-08-19 21:28 by aasahr
[教师之家] 为什么余额宝的年化利率越来越低?主要原因有哪些? +5 瞬息宇宙 2026-08-15 5/250 2026-08-19 20:23 by super2002521
[基金申请] 今天放榜吗? +14 布布和一二 2026-08-19 15/750 2026-08-19 18:07 by gltch
[基金申请] filecode=后面第一个是大写字母 +10 wangze12014 2026-08-14 12/600 2026-08-19 16:56 by 苦难博士
[基金申请] 2027广东省杰青 +4 奶牛小黑 2026-08-15 10/500 2026-08-19 11:02 by wanfengnew
[基金申请] 朋友圈看到的 +6 wangzilk 2026-08-18 8/400 2026-08-19 10:55 by Haru815
[基金申请] 快农历七夕节了,轻松一下,男人悄悄话,女施主请不要进来。 +6 Tide man 2026-08-14 7/350 2026-08-19 09:56 by ZJTJZ
[基金申请] 什么时候开奖? +6 CrisMessi 2026-08-18 6/300 2026-08-19 08:06 by Equinoxhua
[基金申请] 明天放榜? +5 Shxjjxjkx 2026-08-18 5/250 2026-08-18 18:14 by -大大大大大-
[论文投稿] 投稿咨询 +4 wwm09 2026-08-17 6/300 2026-08-18 15:36 by wwm09
[基金申请] 时间戳又变了8-15 +14 archvillain 2026-08-15 26/1300 2026-08-18 13:37 by phantomgost
[基金申请] 今天维护系统维护 祝所有人 高中 +8 gjjjzhong 2026-08-18 9/450 2026-08-18 13:01 by 家与远方
[基金申请] 今天系统多次维护,明天很可能放榜! +8 zju2000 2026-08-16 9/450 2026-08-17 12:20 by lmz0216
[精细化工] 招聘 金属平磨液,抛光液研发工程师 +3 小天0311 2026-08-14 3/150 2026-08-16 07:31 by H9PLUS
[基金申请] 各位道友,我要去昆明玩几天,回来见。 +7 Tide man 2026-08-14 8/400 2026-08-15 01:11 by arzu_hma
信息提示
请填处理意见