









EvalCore ist ein Test-Runner als einzelnes Binärprogramm für LLM-Apps und Agents. Du kannst Testfälle und Scorers in YAML definieren, Live-Verhalten aufzeichnen und es offline in CI wiedergeben, um Regressionen zu erkennen.
Installiere das EvalCore-Binärprogramm, lege eine evals.yaml-Datei und einen JSONL-Datensatz an und richte es dann auf ein OpenAI-kompatibles, REST- oder Shell-Ziel aus. Führe es einmal gegen das Live-System aus, um eine Kassette aufzuzeichnen, und spiele die Suite anschließend in CI mit Baselines, Trials und Scorern erneut ab.





Social Media Listening