Tests comparatifs · Question 56 sur 60
Comme pseudo-oracle pour un test back-to-back, une équipe construit un second modèle avec la même bibliothèque open source et le même algorithme. Les deux modèles fournissent toujours des résultats concordants. Que faut-il prendre en compte ?
2 réponses sont correctes. Difficile Créé avec l’IA
Afficher la solution
Solution
- A Un pseudo-oracle développé par une équipe indépendante avec d'autres frameworks, algorithmes ou paramètres serait préférable
- C En raison de composants partagés, les deux peuvent contenir le même défaut, la concordance est donc trompeuse
Explication
Idéalement, le pseudo-oracle et le système sous test ne devraient pas partager de composants logiciels communs ; sinon les deux peuvent avoir le même défaut et concorder alors que les deux sont faux. C'est particulièrement problématique vu la large diffusion de composants d'IA open source réutilisables. Le pseudo-oracle est donc souvent développé par une équipe différente, idéalement indépendante, avec d'autres frameworks, algorithmes ou paramètres.