Sie messen, wie gut Ihr Agent antwortet. Der Maßstab ist ein Testsatz aus Fragen mit erwarteter Antwort. Bei jeder Änderung am Agenten oder am Modell sehen Sie im Vergleich, was besser und was schlechter wurde. Sie entscheiden anhand der Zahlen, ob eine Änderung bleibt.
Der agentische Teil
Ein Agent ist eine AI, die Arbeitsschritte selbstständig ausführt. Hier stellt ein Prüf-Agent die Fragen des Testsatzes an Ihren Agenten, vergleicht jede Antwort mit der erwarteten Antwort und hält das Ergebnis fest. Nach jeder Änderung am Agenten oder am Modell läuft derselbe Testsatz erneut. Der Vergleich der Läufe zeigt, was besser und was schlechter wurde, und Sie müssen keine Antwort einzeln gegenlesen.
Hauptfunktionen
- Ein Testsatz aus Fragen mit erwarteter Antwort für Ihren Agenten
- Eine Messung, wie gut Ihr Agent antwortet
- Derselbe Testsatz nach jeder Änderung am Agenten
- Derselbe Testsatz nach jedem Wechsel des Modells
- Ein Vergleich, der zeigt, was besser und was schlechter wurde
Einsatzszenarien
- Ihr Kundenservice-Agent bekommt neue Anweisungen. Der Testsatz läuft erneut, und der Vergleich zeigt, ob die Antworten besser oder schlechter wurden.
- Ein neues Modell erscheint, und Sie wollen wissen, ob Ihr Agent damit besser antwortet. Derselbe Testsatz beantwortet die Frage.
Was wir für Sie bauen
- Die Fragen, die Ihre Kunden oder Mitarbeiter dem Agenten stellen
- Die erwarteten Antworten, die Ihre Fachleute festlegen
- Ihr Agent, der geprüft werden soll
- Die Modelle und Änderungen, die verglichen werden
