WIKI / KI & Systeme
KI-Evaluation
Auch bekannt als: Evals, Evaluation von KI-Systemen, KI-Bewertung
Was bedeutet das?
Eine KI-Evaluation prüft das Verhalten eines konkreten KI-Systems anhand festgelegter Testfälle und Kriterien. Sie kann fachliche Qualität, technische Abläufe, Grenzfälle und Risiken vor der Einführung sowie während des Betriebs bewerten.
Ein einfaches Beispiel.
Ein Unternehmen prüft einen KI-Workflow mit typischen und schwierigen Kundenanfragen. Für jeden Fall sind die erwartete Zuordnung, notwendige CRM Angaben und eine mögliche menschliche Freigabe dokumentiert.
Darauf solltest du achten.
Bewerte den vollständigen Einsatzfall und dokumentiere Modell, Anweisung, Datenstand und Schnittstellen. Wiederhole passende Tests nach relevanten Änderungen und ergänze bestätigte Produktionsfehler als Regressionstests.
