Bereitstellungstests · Frage 55 von 60
Ein Team will ein neues Modell mit Live-Daten gegen das bestehende vergleichen und dabei auch Datendrift und Performanz-Regressionen erkennen, ohne Nutzer zu beeinträchtigen. Welche Aussagen treffen zu?
2 Antworten sind richtig. Schwer
Lösung anzeigen
Lösung
- C Er kann Performanz-Regressionen und Datendrift vor der vollständigen Bereitstellung aufdecken
- D Mit dem Shadow-Test vergleicht man neues und altes Modell an echten Daten, ohne dass Nutzer etwas davon merken
Erklärung
Beim Shadow-Test läuft ein neues Modell in Echtzeit parallel zum Produktivmodell, mit denselben Anfragen, aber ohne Einfluss auf die Live-Antworten. Er erlaubt einen risikoarmen Vergleich mit Live-Daten und kann Performanz-Regressionen und Datendrift vor der vollständigen Bereitstellung aufdecken. Die Freigabe für 5 % der Nutzer beschreibt den Canary-Test.