24小时热门版块排行榜    

查看: 2861  |  回复: 3

wenzwl

木虫 (小有名气)

[求助] 如果有大量的外部验证样本,还有必要做十折交叉验证了? 已有1人参与

初学预测模型,模型比较复杂,所用的软件不能直接做10折交叉验证。
我的样本量较大,20000个左右。想请教一个问题,可不可以将其对分为两组,一组做training,一组做testing(最为外部验证)。
如果这样,模型还有必要要进行10折交叉验证吗?
谢谢
回复此楼
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

gorgan

木虫之王 (文学泰斗)

无意苦争春

【答案】应助回帖

★ ★
感谢参与,应助指数 +1
wenzwl: 金币+2, ★★★很有帮助 2014-06-06 11:01:41
10折交叉验证有必要进行
正如你所说:
对分为两组,一组做training,一组做testing
可是你怎么证明你的分组是平等的
或者说你的算法不依赖于你的分组方式呢?
10折交叉验证的目的就是验证你的算法是否依赖于你的分组方式
无我相,无人相,无众生相,无寿者相
2楼2014-06-06 10:28:37
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

wenzwl

木虫 (小有名气)

引用回帖:
2楼: Originally posted by gorgan at 2014-06-06 10:28:37
10折交叉验证有必要进行
正如你所说:
对分为两组,一组做training,一组做testing
可是你怎么证明你的分组是平等的
或者说你的算法不依赖于你的分组方式呢?
10折交叉验证的目的就是验证你的算法是否依赖于你 ...

我做的模型是n个小神经网络集成的。如果要做10折交叉验证,工作量巨大啊。
如果用随机hold-out方法进行验证是不是可以替代10折交叉啊?
3楼2014-06-06 11:07:13
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

gorgan

木虫之王 (文学泰斗)

无意苦争春

【答案】应助回帖

★ ★ ★
wenzwl: 金币+3, ★★★很有帮助, 非常感谢 2014-06-06 11:13:01
引用回帖:
3楼: Originally posted by wenzwl at 2014-06-06 11:07:13
我做的模型是n个小神经网络集成的。如果要做10折交叉验证,工作量巨大啊。
如果用随机hold-out方法进行验证是不是可以替代10折交叉啊?...

随机hold-out方法进行验证
可以看作是对10折交叉的一种替代
无我相,无人相,无众生相,无寿者相
4楼2014-06-06 11:10:54
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 学员2X5EIt 的主题更新
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[基金申请] 关于filecode,很负责任的告诉大家 +6 爱看书的可乐 2026-08-08 7/350 2026-08-08 22:13 by a_niu
[考博] 【2027博士申请】纳米药物递送方向 20+3 13586093586 2026-08-03 5/250 2026-08-08 21:54 by 13586093586
[基金申请] 2026国自然放榜时间 +3 布布和一二 2026-08-08 3/150 2026-08-08 18:15 by Lightingo
[论文投稿] 售SCI-T0P文章,我:8O.5.5.1.O.54,科目齐全,可+急 +3 qTvzQBRAHjCi 2026-08-07 4/200 2026-08-08 16:47 by oEVWOejN9taj
[考博] 售SCI一区T0P文章,我:8O.55.1.O.54,科目全,可伽急 +3 Vi50GxzrFcSG 2026-08-07 4/200 2026-08-08 16:27 by oEVWOejN9taj
[考博] 售一区SCI文章T0P,我:8O.551.O54,科目全,可十急 +3 Vi50GxzrFcSG 2026-08-07 4/200 2026-08-08 16:22 by oEVWOejN9taj
[公派出国] 售SCI一区T0P文章,我:8O.55.1.O.5.4,科目齐全,可+急 +3 Vi50GxzrFcSG 2026-08-07 5/250 2026-08-08 15:59 by oEVWOejN9taj
[硕博家园] 售SCI一区文章,我:8.O.55.1.O.54,科目齐全,可伽急 +4 HEQlVqMTIA7d 2026-08-07 6/300 2026-08-08 14:47 by oEVWOejN9taj
[博后之家] 售SCI一区T0P文章,我:8O.55.1.O.54,科目全,可伽急 +3 HEQlVqMTIA7d 2026-08-07 6/300 2026-08-08 14:42 by oEVWOejN9taj
[公派出国] 售SCI文章,我:8O5.5.1.O.54,科目齐全,可+急 +3 HEQlVqMTIA7d 2026-08-07 6/300 2026-08-08 14:39 by oEVWOejN9taj
[教师之家] 售SCI一区文章,我:8.O.55.1.O.54,科目齐全,可伽急 +3 KXLV3nuBVBY7 2026-08-07 5/250 2026-08-08 14:07 by oEVWOejN9taj
[考博] 售SCI一区文章,我:8.O.55.1.O.54,科目齐全,可伽急 +3 HEQlVqMTIA7d 2026-08-07 3/150 2026-08-08 03:47 by 6vVgjDL4CnGu
[基金申请] 关于filecode +4 布布和一二 2026-08-07 7/350 2026-08-07 22:55 by zhanghaozhu
[基金申请] 听说今天filecode变了 +24 布布和一二 2026-08-06 47/2350 2026-08-07 16:02 by zhiyanjiang
[基金申请] filecode与中标关系的预测 +3 布布和一二 2026-08-07 3/150 2026-08-07 15:09 by gltch
[基金申请] 大家散了吧,后缀研究没有意义,别浪费时间了,过好目前的每一天,不要焦虑 +5 Tide man 2026-08-06 7/350 2026-08-07 13:11 by 医学老男孩
[基金申请] filecode +14 等待解的谜 2026-08-06 19/950 2026-08-07 12:20 by wlwhappy
[基金申请] 影响面上的因素 +8 布布和一二 2026-08-05 11/550 2026-08-06 10:41 by 宝贝虫子
[基金申请] 纯娱乐,不喜欢勿喷 +7 Tide man 2026-08-04 10/500 2026-08-04 15:10 by loufangrui
[基金申请] 什么时候能放榜呀? +3 Jacob678 2026-08-03 3/150 2026-08-03 16:14 by gltch
信息提示
请填处理意见