24小时热门版块排行榜    

查看: 1521  |  回复: 0

leiluke

新虫 (初入文坛)

[求助] 如何计算编码者间的信度interrater reliability

两名编码者对12篇学术论文中存在的错误类型进行编码,
论文  R1    R2   共同   错误A   错误B   错误C
D1        48        44        43       28         43       42
D2        65        61        54       42         54       53
D3        14        14        14       8          14        14
D4        43        43        41       39        41        42
D5        36        32        31       25       31         31
D6        23        22        21      18        21         21
其中,R1,R2表示两名编码者各自发现的错误总数,"共同"指两者共同指出的错误总数;“错误A、B、C”是指在"共同"列指出的错误数中,意见一致的错误类型数量。请问有计算interrater reliability的percentage agreement的简单公式吗(给出该公式的出处)?或者有比percentage更好的方法可以报告以上编码者间信度及具体计算过程结果?
回复此楼
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 leiluke 的主题更新
信息提示
请填处理意见