24小时热门版块排行榜    

查看: 2721  |  回复: 3
当前只显示满足指定条件的回帖,点击这里查看本话题的所有回帖

wenzwl

木虫 (小有名气)

[求助] 如果有大量的外部验证样本,还有必要做十折交叉验证了? 已有1人参与

初学预测模型,模型比较复杂,所用的软件不能直接做10折交叉验证。
我的样本量较大,20000个左右。想请教一个问题,可不可以将其对分为两组,一组做training,一组做testing(最为外部验证)。
如果这样,模型还有必要要进行10折交叉验证吗?
谢谢
回复此楼

» 猜你喜欢

» 本主题相关价值贴推荐,对您同样有帮助:

已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

gorgan

木虫之王 (文学泰斗)

无意苦争春

【答案】应助回帖

★ ★ ★
wenzwl: 金币+3, ★★★很有帮助, 非常感谢 2014-06-06 11:13:01
引用回帖:
3楼: Originally posted by wenzwl at 2014-06-06 11:07:13
我做的模型是n个小神经网络集成的。如果要做10折交叉验证,工作量巨大啊。
如果用随机hold-out方法进行验证是不是可以替代10折交叉啊?...

随机hold-out方法进行验证
可以看作是对10折交叉的一种替代
无我相,无人相,无众生相,无寿者相
4楼2014-06-06 11:10:54
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
查看全部 4 个回答

gorgan

木虫之王 (文学泰斗)

无意苦争春

【答案】应助回帖

★ ★
感谢参与,应助指数 +1
wenzwl: 金币+2, ★★★很有帮助 2014-06-06 11:01:41
10折交叉验证有必要进行
正如你所说:
对分为两组,一组做training,一组做testing
可是你怎么证明你的分组是平等的
或者说你的算法不依赖于你的分组方式呢?
10折交叉验证的目的就是验证你的算法是否依赖于你的分组方式
无我相,无人相,无众生相,无寿者相
2楼2014-06-06 10:28:37
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

wenzwl

木虫 (小有名气)

引用回帖:
2楼: Originally posted by gorgan at 2014-06-06 10:28:37
10折交叉验证有必要进行
正如你所说:
对分为两组,一组做training,一组做testing
可是你怎么证明你的分组是平等的
或者说你的算法不依赖于你的分组方式呢?
10折交叉验证的目的就是验证你的算法是否依赖于你 ...

我做的模型是n个小神经网络集成的。如果要做10折交叉验证,工作量巨大啊。
如果用随机hold-out方法进行验证是不是可以替代10折交叉啊?
3楼2014-06-06 11:07:13
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
信息提示
请填处理意见