KI-Test
Benchmark fuer KI-Ausgaben
Vergleiche zwei strukturierte KI-Antwortsaetze mit erwarteten JSON-Werten und einem optionalen Schema.
Tool-Bereich
Alles lauft im Browser.
Kleine, wiederholbare Tests zeigen Regressionen, die allgemeine Modell-Rankings uebersehen. Importiere JSONL mit expected, actual_a und actual_b. Der Bericht trennt exakte Antworten von bloss schema-gueltigen Ausgaben, ohne API-Schluessel.
- Objektfeld-Reihenfolge wird ignoriert, Array-Reihenfolge nicht.
- Ein gueltiges Schema beweist keine sachliche Richtigkeit.
So wird es benutzt
- Eine JSON-Zeile pro Testfall vorbereiten.
- Bei Bedarf JSON Schema hinzufuegen.
- Fehler pruefen und CSV exportieren.
Typische Anwendungsfalle
- Zwei Modellversionen vergleichen.
- Prompt-Aenderungen testen.
- Formatfehler von falschen Werten trennen.
FAQ
Brauche ich einen API-Schluessel?
Nein, die bereitgestellten Antworten werden lokal verglichen.