24小时热门版块排行榜    

北京石油化工学院2026年研究生招生接收调剂公告
查看: 394  |  回复: 3
当前主题已经存档。

biface

木虫 (正式写手)

[交流] 【转贴】科学评价不能过度依赖引文数据!

来源:http://www.cas.ac.cn/html/Dir/2008/06/12/15/94/01.htm

科学评价不能过度依赖引文数据  

科学时报 2008-6-11     作者:王丹红


    本报北京6月11日讯(记者王丹红)6月11日,国际数学联盟、国际工业与应用数学委员会和国际数理统计学会联合发表《引文统计》报告,对当前科学界盛行的用引文数据评价研究质量的做法提出严重警告。报告指出:“研究太重要,不能只用一种粗糙的工具来衡量它的价值。”

    报告中说:“以引文为基础的统计数据,如影响因子等,常被用于科学研究的评价之中,但这是衡量研究质量的最好方法吗?”

    报告认为,以引文数据来评估研究质量的做法在世界各地的科学界日趋风行,但事实上,对数据的这种应用有相当多的问题。数学家们在这份报告中说:科学评价中不能过度依赖影响因子和H指数等引文统计数据,“这种做法被广泛应用,因为大家相信它们的准确性、客观性和简单性,但这些信任是没有根据的”。

    应国际数学联盟、国际工业与应用数学委员会和国际数理统计学会的联合委托,由以色列特克尼奥恩技术学院的罗伯特·阿德勒(Robert Adler)、美国数学学会的约翰·尤文(John Ewing)和澳大利亚墨尔本大学的彼特·泰勒(Peter Taylor)组成,尤文任主席的一个研究量化评估委员会完成了这份长达26页的报告。

    《引文统计》报告有三个重要发现:第一,在被不恰当地使用时,统计数据是相当不准确的;当统计数据被误解或误用时,科学家们会被误导。第二,引文数据的客观性是一种幻觉,因为引文的意义没有被很好地理解,某种引文的意思可能距离“影响力”十万八千里。第三,用单一数据来评价质量实在是一种太简单的做法,导致对研究这样复杂事物的一种浅薄理解,本质上,数字并不比良好的判断更好。

    报告建议在研究的评价过程中明智地使用引文统计数据,并指出了几种常见的错误。比如,依据引文统计来评价研究成果,就意味着用引用次数来给期刊、论文、人、项目和学科排序。给期刊排序往往根据“影响因子”。影响因子是指期刊近两年的平均被引用率,而这个平均被引用率只反映了引文在论文中分布的小部分情况,是很粗略的统计。此外,用被引用率作为评价期刊好坏的标准还会引起很多误解。仅用引文的统计来判断就好比仅用体重来评判一个人是否健康一样,是很不全面的。

    报告指出,对单个的科学家来说,用引文的统计记录来评判,更加困难。最典型的例子是H指数及它的各种变型,通过这一评价指数及其变量来统计复杂的引用情况是不太可能的。虽然通过这一指数获取了小部分有关科学家引文的分布情况,但同时也错失了对研究成果进行正确评价的关键信息。

    报告建议,评价方法必须切合实际,引文统计数据只能成为评价中的一部分。他们警告:对研究质量而言,引文数据只能提供有限和不完整的观点,“研究太重要,不能只用一种粗糙的工具来衡量它的价值”。  



biface万恶的引用率,万恶的影响因子!   早就该挑战一下这种评价体制了。   
回复此楼
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

calanus

木虫 (著名写手)

人家国外对这个本来就不是太感冒,好的工作自然上好的刊物,science、nature也不会比各专业的好刊物重要太多。
2楼2008-06-13 09:32:36
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

flyindusk

木虫 (正式写手)

目前没有哪种标准可以挑战SCI的IF

★ ★
极度灵感(金币+2,VIP+0):非常同意这个看法.
问题似乎在于我们“过度”依靠吧,——这句话实际上是废话,不论什么标准,只要一过度都是不好的。

还是钱钟书那句话:中国人打遍天下无敌手,外国的好东西到中国来一件毁一件.

这个问题早被注意到了,2000年的时候,Elsevier就发表了题为IMPACT FACTORS-Use & Abuse的报告,见附件
博观约取 厚积薄发 无私无畏 不党不群
3楼2008-06-13 09:37:55
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

极度灵感

银虫 (正式写手)

楼主引用的报告里似乎也没提出更合理的、切实可操作的评价方法。
同意楼上说的,现在似乎还没找到更合理的。
只是在中国人很多人都比较擅长投机取巧,有了if评价体系, 就拼命引用自己的论文。连很多期刊也要求必须引用该刊的几篇以上论文。真是上有政策,下有对策。
发帖和发论文是一个道理,宁缺毋滥。
4楼2008-07-16 21:29:00
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 biface 的主题更新
普通表情 高级回复 (可上传附件)
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[考研] 08工科,295,接受跨专业调剂 +3 lmnlzy 2026-03-31 3/150 2026-03-31 12:36 by 探123
[考研] 085602 307分 求调剂 +8 不知道叫什么! 2026-03-26 8/400 2026-03-31 12:19 by 1018329917
[考研] 一志愿南昌大学324求调剂 +9 hanamiko 2026-03-27 9/450 2026-03-30 20:10 by 无际的草原
[考研] 一志愿郑州大学,080500学硕,总分317分求调剂 +10 举个栗子oi 2026-03-24 11/550 2026-03-30 19:31 by michael2011
[考研] 一志愿哈尔滨工业大学材料与化工方向336分 +12 辰沐5211314 2026-03-26 12/600 2026-03-30 19:28 by Wang200018
[考研] 26考研-291分-厦门大学(085601)-柔性电子学院材料工程专业求调剂 +5 min3 2026-03-24 6/300 2026-03-30 18:42 by 544594351
[考研] 286求调剂 +5 Faune 2026-03-30 5/250 2026-03-30 17:15 by 无际的草原
[考研] 310求调剂 +10 争取九点睡 2026-03-30 10/500 2026-03-30 16:45 by ztnimte
[考研] 生物技术与工程 +7 1294608413 2026-03-25 8/400 2026-03-30 11:36 by 唐沐儿
[考研] 348求调剂 +6 小懒虫不懒了 2026-03-28 6/300 2026-03-30 10:29 by Evan_Liu
[考研] 311求调剂 +10 lin0039 2026-03-26 10/500 2026-03-30 10:26 by herarysara
[考研] 318一志愿吉林大学生物与医药 求调剂 +5 笃行致远. 2026-03-28 5/250 2026-03-30 06:56 by ilovexiaobin
[考研] 298求调剂 +3 种圣赐 2026-03-29 3/150 2026-03-29 12:06 by longlotian
[考研] 一志愿华理,数一英一285求A区调剂 +8 AZMK 2026-03-25 12/600 2026-03-28 18:15 by AZMK
[考研] 调剂 +3 好好读书。 2026-03-28 3/150 2026-03-28 12:04 by 王保杰33
[考研] 086000调剂 +3 7901117076 2026-03-26 3/150 2026-03-27 21:34 by Jianing_Mi
[考研] 285求调剂 +4 AZMK 2026-03-27 7/350 2026-03-27 20:59 by AZMK
[考研] 298调剂 +3 jiyingjie123 2026-03-27 3/150 2026-03-27 11:57 by wxiongid
[考研] 281求调剂 +6 Koxui 2026-03-24 7/350 2026-03-26 15:37 by 无际的草原
[考研] 材料与化工304求B区调剂 +3 邱gl 2026-03-25 3/150 2026-03-25 19:03 by Ainin_
信息提示
请填处理意见