Agent Evaluation Pipeline

Workflow Preview

Description

Dieser Workflow bietet eine automatisierte Qualitätssicherung für KI-Agenten. Er fungiert als Prüfstand, der Antworten in Echtzeit analysiert und bewertet. Automatisierte Prüfung: Sendet Testfragen per Webhook an einen beliebigen Agenten-Endpunkt. Heuristische Bewertung: Benotet Antworten nach Clarity, Accuracy, Helpfulness, Safety und Instruction Following. Fehlertolerantes Logging: Speichert alle Testergebnisse und Scores sicher in Google Sheets, inklusive robuster Fehlerbehandlung bei API-Ausfällen. Einsatzbereich: Kontinuierliches Monitoring von KI-Modellen und Absicherung gegen schlechte Antwortqualität

What's Included