तुलनात्मक परीक्षण · प्रश्न 56 / 60
back-to-back testing के लिए pseudo-oracle के रूप में एक टीम उसी open-source लाइब्रेरी और उसी एल्गोरिदम से दूसरा मॉडल बनाती है। दोनों मॉडल हमेशा मेल खाते परिणाम देते हैं। क्या ध्यान रखना चाहिए?
2 उत्तर सही हैं। कठिन AI से बनाया गया
उत्तर दिखाएँ
उत्तर
- A भिन्न फ्रेमवर्क, एल्गोरिदम या सेटिंग्स वाली स्वतंत्र टीम द्वारा विकसित pseudo-oracle बेहतर होगा
- C साझा घटकों के कारण दोनों में एक ही दोष हो सकता है, इसलिए यह मेल भ्रामक है
व्याख्या
आदर्श रूप से pseudo-oracle और परीक्षणाधीन सिस्टम में सामान्य सॉफ़्टवेयर घटक साझा नहीं होने चाहिए; अन्यथा दोनों में एक ही दोष हो सकता है और दोनों के गलत होने पर भी वे सहमत होंगे। व्यापक रूप से पुन: उपयोग योग्य open-source AI घटकों को देखते हुए यह विशेष रूप से समस्याजनक है। इसलिए pseudo-oracle अक्सर किसी भिन्न, आदर्श रूप से स्वतंत्र टीम द्वारा भिन्न फ्रेमवर्क, एल्गोरिदम या सेटिंग्स का उपयोग करके विकसित किया जाता है।