डेटासेट और लेबल जाँच · प्रश्न 38 / 60
कम इंटर-एनोटेटर एग्रीमेंट (IAA) स्कोर क्या संकेत दे सकते हैं?
3 उत्तर सही हैं। मध्यम AI से बनाया गया
उत्तर दिखाएँ
उत्तर
- C लेबलिंग दिशानिर्देशों में दोष
- D खराब एनोटेशन
- E अस्पष्ट डेटा
व्याख्या
कम IAA स्कोर लेबलिंग दिशानिर्देशों में दोष, अस्पष्ट डेटा या खराब एनोटेशन का संकेत दे सकते हैं। IAA को एकाधिक एनोटेशन में मापा जाता है, उदाहरण के लिए Cohen's Kappa या प्रतिशत सहमति से।