ISTQB CT-AI
गुणवत्ता विशेषताएँ और स्वीकृति मानदंड
आसान
ISO/IEC 25059 के अनुसार गुणवत्ता विशेषताएँ
- कौन-सा मानक ISO/IEC 25010 के गुणवत्ता मॉडल को AI-विशिष्ट पहलुओं के साथ विस्तारित करता है?
- ISO/IEC 25059 AI-आधारित सिस्टम का मूल्यांकन किन दो दृष्टिकोणों से करता है?
- AI-आधारित सिस्टम के लिए functional correctness विशेषता को क्यों समायोजित किया गया?
- गुणवत्ता विशेषता functional adaptability क्या वर्णित करती है?
- कौन-सी गुणवत्ता विशेषता वर्णित करती है कि कोई व्यक्ति या दूसरा सिस्टम AI सिस्टम के संचालन में समय पर हस्तक्षेप कर सकता है?
- 2023 के ISO/IEC 25010 में, जिसे पहले usability कहा जाता था उसकी जगह कौन-सा शब्द लेता है?
- AI-आधारित सिस्टम में गुणवत्ता विशेषता transparency किस ओर संकेत करती है?
- गुणवत्ता विशेषता AI robustness क्या वर्णित करती है?
- कौन-सी गुणवत्ता विशेषता वर्णित करती है कि कोई ऑपरेटर नुकसान या खतरे को टालने के लिए AI सिस्टम में समय पर कितनी अच्छी तरह हस्तक्षेप कर सकता है?
- गुणवत्ता विशेषता societal and ethical risk mitigation किस दृष्टिकोण से संबंधित है?
AI और सुरक्षा
- सुरक्षा-संबंधी (safety-related) सिस्टम की क्या विशेषता है?
- कई AI-आधारित सिस्टम की आवश्यकताएँ परोक्ष रूप से कैसे दी जाती हैं?
- कौन-सा टूल explainable AI तकनीकों का उदाहरण है?
- EU AI Act सुरक्षा घटकों के रूप में उपयोग किए जाने वाले AI सिस्टम, उदाहरण के लिए विमानन, चिकित्सा उपकरणों या वाहनों में, को कैसे वर्गीकृत करता है?
- परिपक्व अंतरराष्ट्रीय functional safety मानक AI से कैसे निपटते हैं?
स्वीकृति मानदंड
- AI-आधारित सिस्टम के लिए स्वीकृति मानदंड अक्सर किस रूप में होते हैं?
- स्वीकृति मानदंड "इमेज रिकग्निशन सिस्टम की 95% सटीकता" किस गुणवत्ता विशेषता से संबंधित है?
- एक स्वीकृति मानदंड कहता है: "यदि कोई स्वायत्त ड्रोन अपना GPS सिग्नल खो देता है और आपातकाल की सूचना देता है, तो एक पर्यवेक्षक 0.5 सेकंड के भीतर नियंत्रण सँभाल सकता है।" किस गुणवत्ता विशेषता का परीक्षण किया जा रहा है?
- एक स्वीकृति मानदंड के अनुसार डैशबोर्ड और API को तैनात किए गए prediction model का अद्वितीय संस्करण पहचानकर्ता और उसके दस्तावेज़ीकरण का लिंक लौटाना चाहिए। कौन-सी गुणवत्ता विशेषता संबंधित है?
- एक स्वीकृति मानदंड कहता है: "एक chatbot को कम से कम 95% के साथ आंतरिक red teaming आकलन पास करना चाहिए और हिंसा, आत्म-क्षति या घृणास्पद भाषण को बढ़ावा देने वाली सामग्री को अस्वीकार करना चाहिए।" किस गुणवत्ता विशेषता का परीक्षण किया जा रहा है?
मध्यम
ISO/IEC 25059 के अनुसार गुणवत्ता विशेषताएँ
- ISO/IEC 25010 की तुलना में ISO/IEC 25059 में कौन-सी गुणवत्ता विशेषताएँ नई या संशोधित हैं?
- functional adaptability को नई उप-विशेषता के रूप में किस मूल विशेषता के अंतर्गत रखा गया है?
- AI robustness को नई उप-विशेषता के रूप में किस मूल विशेषता के अंतर्गत रखा गया है?
- intervenability को नई उप-विशेषता के रूप में किस मूल विशेषता के अंतर्गत रखा गया है?
- transparency को नई उप-विशेषता के रूप में किन मूल विशेषताओं के अंतर्गत रखा गया है?
- किन परिस्थितियों में एक robust AI सिस्टम को अपनी functional correctness बनाए रखनी चाहिए?
- सामाजिक और नैतिक जोखिम शमन (societal and ethical risk mitigation) विशेषता अन्य बातों के साथ किन क्षेत्रों को कवर करती है?
- ISO/IEC 25059 की गुणवत्ता विशेषताएँ टेस्टिंग को कैसे प्रभावित करती हैं?
AI और सुरक्षा
- AI सेफ़्टी-संबंधित सिस्टम में कौन-सी अतिरिक्त चुनौतियाँ लाता है?
- गैर-नियतात्मकता (non-determinism) के संदर्भ में, कठोरता से टेस्ट किए गए AI मॉडल में भी अप्रत्याशित व्यवहार का कारण क्या हो सकता है?
- स्व-अधिगम (self-learning) किसी सिस्टम के safety case को क्यों कमज़ोर करता है?
- स्व-अधिगम वाले सिस्टम के लिए safety guard का उदाहरण कौन-सा है?
- LIME जैसी explainable AI तकनीकों की क्या सीमाएँ हैं?
स्वीकृति मानदंड
- एक स्वीकृति मानदंड कहता है: "एक वीडियो स्ट्रीमिंग सेवा, उपयोगकर्ता द्वारा तीन पूर्ण-लंबाई की डॉक्यूमेंट्री देखने के बाद, अपने होमपेज को कम से कम 40% डॉक्यूमेंट्री सुझाने के लिए समायोजित करती है।" कौन-सी विशेषता टेस्ट की जा रही है?
- एक स्वीकृति मानदंड कहता है: "यदि आउटडोर AI कैमरा ज़्यादा गर्म हो जाता है, तो वह विफल होने के बजाय एक सरल, बिजली-बचत वाले मॉडल पर स्विच कर जाता है।" कौन-सी विशेषता टेस्ट की जा रही है?
- एक स्वीकृति मानदंड कहता है: "AI-नियंत्रित सिग्नल बॉक्स द्वारा क्रिटिकल चिह्नित स्विच सेटिंग को लागू करने से पहले, डिस्पैचर के पास उसे रोकने के लिए 20 सेकंड होते हैं।" कौन-सी विशेषता टेस्ट की जा रही है?
- कौन-से स्वीकृति मानदंड सेफ़्टी के उदाहरण हैं?
- AI-आधारित सिस्टम के लिए स्वीकृति मानदंडों में सॉफ़्टवेयर गुणवत्ता को परिभाषित करने का व्यापक ढाँचा कौन-से दो मानक प्रदान करते हैं?
- एक स्वीकृति मानदंड की माँग है कि खरीदे गए ML मॉडल की खरीद टीम यह पता लगा सके कि उसका प्रशिक्षण डेटा कहाँ से आता है। कौन-सी विशेषता टेस्ट की जा रही है?
- कौन-से स्वीकृति मानदंड AI functional correctness के उदाहरण हैं?
कठिन
ISO/IEC 25059 के अनुसार गुणवत्ता विशेषताएँ
- एक व्यवसाय इकाई ML वर्गीकरण सिस्टम के लिए माँग करती है: "सिस्टम से एक भी गलत वर्गीकरण नहीं होना चाहिए।" इस आवश्यकता का मूल्यांकन कैसे किया जाए?
- एक image recognition सिस्टम साफ़ टेस्ट चित्रों पर अच्छे परिणाम देता है, लेकिन थोड़े नॉइज़ वाले या जानबूझकर बदले गए चित्रों पर बहुत त्रुटियाँ करता है। कौन-सी गुणवत्ता विशेषता कमज़ोर है?
- एक क्रेडिट सिस्टम आवेदन अस्वीकार कर देता है, और आवेदकों या क्लर्कों को यह पता नहीं चलता कि कौन-सा मॉडल किस संस्करण में उपयोग हो रहा है और प्रशिक्षण डेटा कहाँ से आया है। कौन-सी गुणवत्ता विशेषता प्रभावित है?
- उपयोगकर्ता-नियंत्रणीयता और हस्तक्षेप-क्षमता में क्या अंतर है?
- ISO/IEC 25059 के अनुसार गुणवत्ता विशेषता और परिप्रेक्ष्य के कौन-से मिलान सही हैं?
- एक recommender सिस्टम संचालन के दौरान उपयोगकर्ताओं के नए रुझानों के अनुरूप ढल जाता है, लेकिन हेरफेर की गई रेटिंगों के सामने सटीकता खो देता है। यहाँ किन विशेषताओं को एक-दूसरे के सामने तौलना होगा?
AI और सुरक्षा
- एक निर्माता AI-आधारित ब्रेक असिस्ट सिस्टम के लिए आवश्यकताओं से कार्यान्वयन तक अनुरेखणीयता दिखाना चाहता है। यह कठिन क्यों है?
- एक औद्योगिक नियंत्रण सिस्टम के लिए कठोरता से टेस्ट किया गया AI मॉडल लगभग समान इनपुट पर क्षेत्र में अलग प्रतिक्रिया देता है। यहाँ कौन-सी चुनौती दिखती है?
- नियंत्रण केंद्र में एक स्वयं सीखने वाले सहायक का परिनियोजन से पहले व्यापक टेस्ट किया गया था। कौन-से उपाय मदद करते हैं ताकि संचालन के दौरान कोई खतरनाक व्यवहार न आ जाए?
- एक टीम सुरक्षा-संबंधी AI सिस्टम के लिए निर्णयों को अनुरेखणीय बनाने हेतु LIME का उपयोग करना चाहती है। किस बात का ध्यान रखना होगा?
- एक चिकित्सा उपकरण निर्माता AI मॉड्यूल को सुरक्षा घटक के रूप में उपयोग करना चाहता है और केवल एक परिपक्व कार्यात्मक सुरक्षा मानक पर निर्भर रहना चाहता है। इसमें कौन-सी समस्याएँ हैं?
- AI के साथ सुरक्षा-संबंधी सिस्टम विकसित करना AI के बिना की तुलना में अधिक कठिन क्यों है?
स्वीकृति मानदंड
- एक स्वीकृति मानदंड कहता है: "जब किसी सेंसर का दृश्य प्रदर्शन 30% से अधिक गिरता है तो फ़ार्म नियंत्रण सिस्टम किसान को सूचित करता है और तुरंत मैन्युअल override की अनुमति देता है; उत्तर न मिलने पर 50% से वह पूरी तरह निष्क्रिय हो जाता है।" यह किस विशेषता से संबंधित है?
- कौन-से स्वीकृति मानदंड AI robustness को जाँचते हैं?
- कौन-से स्वीकृति मानदंड हस्तक्षेप-क्षमता को जाँचते हैं?
- एक परमाणु ऊर्जा संयंत्र के लिए एक स्वीकृति मानदंड माँग करता है कि ML मॉडल के 100% इनपुट-आउटपुट संबंधों को एक व्याख्येयता उपकरण द्वारा कम से कम 99.9% की औसत सटीकता से मैप किया जा सके। यह किस क्षेत्र से संबंधित है?
- एक सज़ा-निर्धारण सिस्टम के लिए एक स्वीकृति मानदंड माँग करता है कि वह निर्दिष्ट fairness मेट्रिक के आधार पर जनसंख्या समूहों के बीच भेदभाव न करे। इस बारे में कौन-से कथन सही हैं?
- एक प्रोजेक्ट मैनेजर AI सिस्टम की स्वीकृति को क्लासिक सॉफ़्टवेयर की तरह "pass/fail" वाले अलग-अलग टेस्ट केसों से करना चाहता है। इसके विरुद्ध क्या बात है?
- इंजन प्रबंधन सिस्टम की कार्यात्मक अनुकूलनीयता के लिए कौन-सा स्वीकृति मानदंड उपयुक्त होगा?
- एक दोष पूर्वानुमान सिस्टम को वास्तव में दोषपूर्ण मॉड्यूलों में से कम से कम 90% को दोषपूर्ण के रूप में पहचानना है। इस बारे में कौन-से कथन सही हैं?