24小时热门版块排行榜    

查看: 2928  |  回复: 3
当前只显示满足指定条件的回帖,点击这里查看本话题的所有回帖

wenzwl

木虫 (小有名气)

[求助] 如果有大量的外部验证样本,还有必要做十折交叉验证了? 已有1人参与

初学预测模型,模型比较复杂,所用的软件不能直接做10折交叉验证。
我的样本量较大,20000个左右。想请教一个问题,可不可以将其对分为两组,一组做training,一组做testing(最为外部验证)。
如果这样,模型还有必要要进行10折交叉验证吗?
谢谢
回复此楼
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

wenzwl

木虫 (小有名气)

引用回帖:
2楼: Originally posted by gorgan at 2014-06-06 10:28:37
10折交叉验证有必要进行
正如你所说:
对分为两组,一组做training,一组做testing
可是你怎么证明你的分组是平等的
或者说你的算法不依赖于你的分组方式呢?
10折交叉验证的目的就是验证你的算法是否依赖于你 ...

我做的模型是n个小神经网络集成的。如果要做10折交叉验证,工作量巨大啊。
如果用随机hold-out方法进行验证是不是可以替代10折交叉啊?
3楼2014-06-06 11:07:13
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
查看全部 4 个回答

gorgan

木虫之王 (文学泰斗)

无意苦争春

【答案】应助回帖

★ ★
感谢参与,应助指数 +1
wenzwl: 金币+2, ★★★很有帮助 2014-06-06 11:01:41
10折交叉验证有必要进行
正如你所说:
对分为两组,一组做training,一组做testing
可是你怎么证明你的分组是平等的
或者说你的算法不依赖于你的分组方式呢?
10折交叉验证的目的就是验证你的算法是否依赖于你的分组方式
无我相,无人相,无众生相,无寿者相
2楼2014-06-06 10:28:37
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

gorgan

木虫之王 (文学泰斗)

无意苦争春

【答案】应助回帖

★ ★ ★
wenzwl: 金币+3, ★★★很有帮助, 非常感谢 2014-06-06 11:13:01
引用回帖:
3楼: Originally posted by wenzwl at 2014-06-06 11:07:13
我做的模型是n个小神经网络集成的。如果要做10折交叉验证,工作量巨大啊。
如果用随机hold-out方法进行验证是不是可以替代10折交叉啊?...

随机hold-out方法进行验证
可以看作是对10折交叉的一种替代
无我相,无人相,无众生相,无寿者相
4楼2014-06-06 11:10:54
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[公派出国] 售SCI-T0P文章,我:8O.5.5.1.O.54,科目齐全,可+急 +5 ELBZ6WwEaRj6 2026-11-04 10/500 2026-11-06 09:01 by 2lRNluKrJpwL
[考研] 售一区SCI文章T0P,我:8O.551.O54,科目全,可十急 +6 ncTVBM6AOJHF 2026-11-04 16/800 2026-11-06 07:55 by GBJlw5zzHWpZ
[硕博家园] 售SCI一区T0P文章,我:8O.55.1.O.54,科目全,可伽急 +6 ncTVBM6AOJHF 2026-11-04 12/600 2026-11-06 07:55 by GBJlw5zzHWpZ
[硕博家园] 售SCI一区文章,我:8.O.55.1.O.54,科目齐全,可伽急 +3 ELBZ6WwEaRj6 2026-11-04 12/600 2026-11-06 05:32 by qL1cU46YIdK0
[公派出国] 售SCI一区T0P文章,我:8.O.55.1.O.54,科目齐全,可+急 +3 ttH3f1oA6ace 2026-11-04 8/400 2026-11-06 05:22 by qL1cU46YIdK0
[硕博家园] 售SCI一区文章,我:8O5.5.1.O5.4,科目全,可伽急 +3 ttH3f1oA6ace 2026-11-04 9/450 2026-11-06 05:21 by qL1cU46YIdK0
[公派出国] 售SCI一区文章,我:8.O.551.O.5.4,科目全,可伽急 +4 ttH3f1oA6ace 2026-11-04 10/500 2026-11-06 05:21 by qL1cU46YIdK0
[公派出国] 售SCI-T0P文章,我:8O.5.5.1.O.54,科目齐全,可+急 +7 ncTVBM6AOJHF 2026-11-04 11/550 2026-11-06 05:15 by Equinoxhua
[考研] 售SCI-T0P文章,我:8O.5.5.1.O.54,科目齐全,可+急 +4 ttH3f1oA6ace 2026-11-04 14/700 2026-11-06 05:11 by qL1cU46YIdK0
[考博] 售SCI一区T0P文章,我:8.O.55.1.O54,科目全,可伽急 +4 kvewwGtKktqB 2026-11-04 11/550 2026-11-06 05:10 by qL1cU46YIdK0
[公派出国] 售SCI一区T0P文章,我:8.O.55.1.O54,科目全,可伽急 +5 kvewwGtKktqB 2026-11-04 14/700 2026-11-06 05:10 by qL1cU46YIdK0
[硕博家园] 售SCI一区T0P文章,我:8O.55.1.O.5.4,科目齐全,可+急 +6 kvewwGtKktqB 2026-11-04 16/800 2026-11-06 05:00 by qL1cU46YIdK0
[考博] 售SCI一区T0P文章,我:8.O55.1.O.54,科目全,可十急 +6 ncTVBM6AOJHF 2026-11-04 16/800 2026-11-06 04:58 by qL1cU46YIdK0
[考研] 售SCI一区T0P文章,我:8O.55.1.O.5.4,科目齐全,可+急 +6 ncTVBM6AOJHF 2026-11-04 13/650 2026-11-06 04:49 by qL1cU46YIdK0
[硕博家园] 售SCI一区文章,我:8O5.5.1.O5.4,科目全,可伽急 +4 ncTVBM6AOJHF 2026-11-04 12/600 2026-11-06 04:47 by qL1cU46YIdK0
[公派出国] 售一区SCI文章T0P,我:8O.551.O54,科目全,可十急 +3 ELBZ6WwEaRj6 2026-11-05 4/200 2026-11-06 02:37 by qL1cU46YIdK0
[硕博家园] 售一区SCI文章T0P,我:8O.551.O54,科目全,可十急 +4 ELBZ6WwEaRj6 2026-11-04 8/400 2026-11-06 02:24 by qL1cU46YIdK0
[考研] 售SCI一区T0P文章,我:8.O55.1.O.54,科目全,可十急 +4 ttH3f1oA6ace 2026-11-04 10/500 2026-11-06 02:04 by qL1cU46YIdK0
[硕博家园] 售SCI一区文章,我:8.O.551.O.5.4,科目全,可伽急 +5 ncTVBM6AOJHF 2026-11-04 10/500 2026-11-06 01:40 by qL1cU46YIdK0
[基金申请] 各位基础老师们,看完中央《从严治党》的决定后,对学术界更加有信心了吧 +5 iaeyuan 2026-11-01 5/250 2026-11-04 14:43 by jinchengzi
信息提示
请填处理意见