数据集与标签检查 · 第 19 题,共 60 题
可以用哪些指标衡量标注者间一致性(IAA)?
有 1 个正确答案。 简单 由 AI 生成
显示答案
答案
- B Cohen's Kappa 或简单的百分比一致率
解析
标注人员的一致程度(标注者间一致性,IAA)例如用 Cohen's Kappa 衡量,或者简单地用相同标签的百分比衡量。如果一致性低,往往是指南不清晰、数据有歧义或标注草率。
数据集与标签检查 · 第 19 题,共 60 题
有 1 个正确答案。 简单 由 AI 生成
标注人员的一致程度(标注者间一致性,IAA)例如用 Cohen's Kappa 衡量,或者简单地用相同标签的百分比衡量。如果一致性低,往往是指南不清晰、数据有歧义或标注草率。