微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

评分者之间的协议和注释即表格问题

如何解决评分者之间的协议和注释即表格问题

这些数据使我面临两个难题。 我有2位注释者,我要求他们根据以下类别对12张图像进行注释/分类:混凝土,草,树和建筑物。

我发现的第一个问题是,对于一张图片,他们选择了多个类别,有时会达成共识,有时会出现分歧(在表格上以黄色突出显示)-我不知道如何将这些答案列为表格右侧的表格(用于计算评估者之间的协议)。有人可以帮忙吗?

第二个问题是对此最好的评估者间协议测试是什么?我知道,在这种情况下,很难进行科恩(Cohen)和弗莱斯·卡帕(Fleiss Kappa)的诉讼。您推荐什么替代品?

谢谢。

enter image description here

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。