तुलनात्मक परीक्षण · प्रश्न 59 / 60
एक टीम एक ओर यह पता लगाना चाहती है कि दो मॉडल वेरिएंट में से किसकी accuracy बेहतर है और दूसरी ओर नए implementation में दोषों का पता लगाना चाहती है। प्रत्येक उद्देश्य के लिए कौन-सी तकनीकें उपयुक्त हैं?
2 उत्तर सही हैं। कठिन AI से बनाया गया
उत्तर दिखाएँ
उत्तर
- B दोषों का पता लगाने के लिए pseudo-oracle के साथ back-to-back testing
- D प्रदर्शन मीट्रिक पर आधारित दोनों वेरिएंट की सांख्यिकीय तुलना के लिए A/B testing
व्याख्या
A/B testing एक ही ML सिस्टम के दो वेरिएंट की functional performance मीट्रिक और सांख्यिकीय तकनीकों से तुलना करके बेहतर वेरिएंट निर्धारित करता है। Back-to-back testing एक वैकल्पिक संस्करण को pseudo-oracle के रूप में उपयोग करता है और दोषों का पता लगाने के लिए प्रयोग होता है।