24小时热门版块排行榜    

CyRhmU.jpeg
查看: 1613  |  回复: 3

尘烟飘渺

新虫 (初入文坛)

[求助] 交叉验证可以用来优化训练集测试集的比例吗?已有1人参与

The authors should justify why they have considered 70% and 30% split between training and test sets. This can be emperically justified via cross validation. The authors should at least use  5-fold cross validation strategy for providing their results, which is very important when providing the classification performance. The mean and standard deviation of the validation results must be reported. Error bars or confidence intervals for the classification accuracy should be shown. This can be achieved used cross validation and statistical boot strapping.这是编辑的审稿意见,提到说让我证明为什么要把测试集训练集三七分,这个不应该是通过看学习曲线来选择吗,为什么要用k折交叉验证,他到底表达什么,不是很明白

发自小木虫Android客户端
回复此楼
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

jbb0523

至尊木虫 (著名写手)

怎么感觉这个审稿意见那么主观呢?三七开不是一个经验值么?审稿人要求5折交叉验证,是不是业内人士都这么测试泛化误差而不是简单的在测试集上测试?

发自小木虫Android客户端
我不去想是否能够成功,既然选择了远方便只顾风雨兼程……
2楼2017-03-26 19:25:12
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

尘烟飘渺

新虫 (初入文坛)

引用回帖:
2楼: Originally posted by jbb0523 at 2017-03-26 19:25:12
怎么感觉这个审稿意见那么主观呢?三七开不是一个经验值么?审稿人要求5折交叉验证,是不是业内人士都这么测试泛化误差而不是简单的在测试集上测试?

说的有道理,他是不是就想看下泛化性能够不够稳定可靠啊
3楼2017-03-27 09:20:33
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

jbb0523

至尊木虫 (著名写手)

【答案】应助回帖

感谢参与,应助指数 +1
引用回帖:
3楼: Originally posted by 尘烟飘渺 at 2017-03-27 09:20:33
说的有道理,他是不是就想看下泛化性能够不够稳定可靠啊...

学习机器学习有一段时间了,但没看过论文,一直看公开课和西瓜书,如我前面所述,两个可能,一是机器学习业内的惯例,测试泛化误差必用N折交叉验证,不能简单的在测试集上测试;二是审稿人习惯用N折交叉验证,所以他认为你的测试方法太简单~

发自小木虫Android客户端
我不去想是否能够成功,既然选择了远方便只顾风雨兼程……
4楼2017-03-27 12:55:28
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 尘烟飘渺 的主题更新
信息提示
请填处理意见