如何解决使用 krippendorff alpha 或 fleiss kappa 的低注释器间协议
我有 3 个类别，每个类别由 3 个注释者评分。在 52% 的情况下，3 名注释者同意同一类别，43% 两名注释者同意一个类别，并且只有 5% 的情况下，每个注释者选择了不同的类别。
我计算了 fleiss 的 kappa 或 krippendorff，但 krippendorff 的值比 fleiss 低得多，低得多，它是 0.032，而我的 fleiss 是 0.49。
是不是协议太低了，尤其是使用krippendorff？
版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 dio@foxmail.com 举报，一经查实，本站将立刻删除。
