24小时热门版块排行榜    

查看: 1651  |  回复: 3

尘烟飘渺

新虫 (初入文坛)

[求助] 交叉验证可以用来优化训练集测试集的比例吗? 已有1人参与

The authors should justify why they have considered 70% and 30% split between training and test sets. This can be emperically justified via cross validation. The authors should at least use  5-fold cross validation strategy for providing their results, which is very important when providing the classification performance. The mean and standard deviation of the validation results must be reported. Error bars or confidence intervals for the classification accuracy should be shown. This can be achieved used cross validation and statistical boot strapping.这是编辑的审稿意见,提到说让我证明为什么要把测试集训练集三七分,这个不应该是通过看学习曲线来选择吗,为什么要用k折交叉验证,他到底表达什么,不是很明白

发自小木虫Android客户端
回复此楼
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

jbb0523

至尊木虫 (著名写手)

怎么感觉这个审稿意见那么主观呢?三七开不是一个经验值么?审稿人要求5折交叉验证,是不是业内人士都这么测试泛化误差而不是简单的在测试集上测试?

发自小木虫Android客户端
我不去想是否能够成功,既然选择了远方便只顾风雨兼程……
2楼2017-03-26 19:25:12
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

尘烟飘渺

新虫 (初入文坛)

引用回帖:
2楼: Originally posted by jbb0523 at 2017-03-26 19:25:12
怎么感觉这个审稿意见那么主观呢?三七开不是一个经验值么?审稿人要求5折交叉验证,是不是业内人士都这么测试泛化误差而不是简单的在测试集上测试?

说的有道理,他是不是就想看下泛化性能够不够稳定可靠啊
3楼2017-03-27 09:20:33
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

jbb0523

至尊木虫 (著名写手)

【答案】应助回帖

感谢参与,应助指数 +1
引用回帖:
3楼: Originally posted by 尘烟飘渺 at 2017-03-27 09:20:33
说的有道理,他是不是就想看下泛化性能够不够稳定可靠啊...

学习机器学习有一段时间了,但没看过论文,一直看公开课和西瓜书,如我前面所述,两个可能,一是机器学习业内的惯例,测试泛化误差必用N折交叉验证,不能简单的在测试集上测试;二是审稿人习惯用N折交叉验证,所以他认为你的测试方法太简单~

发自小木虫Android客户端
我不去想是否能够成功,既然选择了远方便只顾风雨兼程……
4楼2017-03-27 12:55:28
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 尘烟飘渺 的主题更新
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[论文投稿] 售SCI一区文章,我:8 O5 51O 54,科目齐全 +3 3rkserf6qr 2026-02-07 4/200 2026-02-08 02:45 by vs90ilomwc
[硕博家园] 售SCI一区文章,我:8 O5 51O 54,科目齐全 +3 3rkserf6qr 2026-02-07 3/150 2026-02-08 02:32 by vs90ilomwc
[硕博家园] 售SCI一区文章,我:8 O5 51O 54,科目齐全 +5 2h7du0nuhk 2026-02-07 5/250 2026-02-08 02:27 by vs90ilomwc
[考博] 售SCI一区文章,我:8 O5 51O 54,科目齐全 +5 2h7du0nuhk 2026-02-07 5/250 2026-02-08 02:25 by vs90ilomwc
[硕博家园] 售SCI一区文章,我:8 O5 51O 54,科目齐全 +4 2h7du0nuhk 2026-02-07 5/250 2026-02-08 02:12 by vs90ilomwc
[考博] 售SCI一区文章,我:8 O5 51O 54,科目齐全 +4 2h7du0nuhk 2026-02-07 6/300 2026-02-08 02:07 by vs90ilomwc
[教师之家] 售SCI一区文章,我:8 O5 51O 54,科目齐全 +4 2h7du0nuhk 2026-02-07 6/300 2026-02-08 02:05 by vs90ilomwc
[找工作] 售SCI一区文章,我:8 O5 51O 54,科目齐全 +4 2h7du0nuhk 2026-02-07 6/300 2026-02-08 01:46 by vs90ilomwc
[公派出国] 售SCI一区文章,我:8 O5 51O 54,科目齐全 +4 2h7du0nuhk 2026-02-07 7/350 2026-02-08 01:45 by vs90ilomwc
[考博] 售SCI一区文章,我:8 O5 51O 54,科目齐全 +4 2h7du0nuhk 2026-02-07 7/350 2026-02-08 01:32 by vs90ilomwc
[硕博家园] 售SCI一区文章,我:8 O5 51O 54,科目齐全 +4 2h7du0nuhk 2026-02-07 7/350 2026-02-08 01:12 by vs90ilomwc
[教师之家] 有院领导为了换新车,用横向课题经费买了俩车 +7 瞬息宇宙 2026-02-04 7/350 2026-02-07 21:47 by tfang
[有机交流] 酰胺脱乙酰基 10+5 chibby 2026-02-03 12/600 2026-02-07 19:29 by 江东闲人
[基金申请] 同年申请2项不同项目,第1个项目里不写第2个项目的信息,可以吗 +4 hitsdu 2026-02-06 4/200 2026-02-07 13:07 by jurkat.1640
[基金申请] 有时候真觉得大城市人没有县城人甚至个体户幸福 +9 苏东坡二世 2026-02-04 10/500 2026-02-07 12:37 by 小毛球
[考博] 天津大学招2026.09的博士生,欢迎大家推荐交流(博导是本人) +4 a793625982 2026-02-05 5/250 2026-02-07 10:57 by a793625982
[公派出国] CSC & MSCA 博洛尼亚大学能源材料课题组博士/博士后招生|MSCA经费充足、排名优 +4 雨念 2026-02-01 6/300 2026-02-06 23:32 by MelissaPon
[基金申请] 面上项目申报 +3 Tide man 2026-02-01 3/150 2026-02-05 22:56 by god_tian
[硕博家园] 博士延得我,科研能力直往上蹿 +7 偏振片 2026-02-02 7/350 2026-02-04 17:36 by 陈氏帝国
[教师之家] 遇见不省心的家人很难过 +18 otani 2026-02-03 22/1100 2026-02-04 11:06 by tangmnt
信息提示
请填处理意见