Jede Ausgabe Ihrer AI bekommt eine Bewertung nach festen Kriterien, bevor sie weiterläuft. Sie legen fest, was als gut gilt. Für jede Ausgabe steht fest, wie sie abgeschnitten hat. So wissen Sie, ob Ihre AI Ihren Maßstab erfüllt.
Der agentische Teil
Ein Agent ist eine AI, die Arbeitsschritte selbstständig ausführt. Hier arbeiten zwei Arten von Prüfern zusammen. Code prüft, was sich mit festen Regeln feststellen lässt. Die übrigen Kriterien beurteilt ein Bewerter, ein AI-Modell aus einer anderen Modellfamilie als das Modell, das die Ausgabe erzeugt hat. Eine Modellfamilie ist die Modellreihe eines Anbieters. Beide Prüfungen laufen für jede Ausgabe, bevor sie weitergeht, und Sie müssen dafür keine Ausgabe selbst lesen.
Hauptfunktionen
- Feste Kriterien, nach denen jede Ausgabe bewertet wird
- Eine Bewertung vor jedem Weitergang der Ausgabe
- Prüfung durch Code für alles, was sich mit festen Regeln feststellen lässt
- Beurteilung der übrigen Kriterien durch einen Bewerter aus einer anderen Modellfamilie
- Ein Bewertungsergebnis je Ausgabe
Einsatzszenarien
- Ihre AI schreibt Antworten für Kunden. Jede Antwort wird nach Ihren Kriterien bewertet, bevor sie weiterläuft.
- Ihr Team nutzt AI für Texte. Ob ein Text Ihre Kriterien erfüllt, entscheidet eine feste Prüfung.
Was wir für Sie bauen
- Ihre Kriterien dafür, was eine gute Ausgabe ist
- Die Ausgaben Ihrer AI, die geprüft werden sollen
- Die Festlegung, welche Kriterien Code und welche der Bewerter übernimmt
- Die Stelle, an der die Bewertung vor dem Weitergang der Ausgabe eingreift
