5
0 Examens
0 Sauvegardés
Introduction :
Tests de snapshots hors ligne pour le comportement de l’IA
Ajouté le :
Jul 24 2026
Visiteurs mensuels :
--
Social & Email :
--
EvalCore Informations sur le produit

Qu'est-ce que EvalCore ?

EvalCore est un binaire unique pour les tests des applications et agents LLM. Il vous permet de définir des cas de test et des évaluateurs en YAML, d’enregistrer le comportement réel et de le rejouer hors ligne dans la CI pour détecter les régressions.

Comment utiliser EvalCore ?

Installez le binaire EvalCore, créez un fichier evals.yaml et un jeu de données JSONL, puis pointez-le vers une cible compatible OpenAI, REST ou shell. Exécutez-le une première fois sur le système en production pour enregistrer une cassette, puis rejouez la suite dans la CI avec des références, des essais et des évaluateurs.

Fonctionnalités de base de EvalCore

Moteur de tests en binaire unique pour les applications et agents LLM

Définitions d’évaluations et évaluateurs basés sur YAML

Enregistrer et rejouer les appels au modèle avec des exécutions CI hors ligne et déterministes

Prise en charge des cibles compatibles OpenAI, REST, shell et basées sur des traces

Vérifications de référence et blocage des régressions

Comparaisons de modèles, essais et rapports

Stockage local des cassettes dans SQLite

Prise en charge d’OpenTelemetry et des traces OpenInference

Les cas d'utilisation de EvalCore

#1

Exécuter des tests de régression IA à chaque pull request

#2

Rejouer hors ligne les sorties LLM enregistrées dans la CI sans clés API

#3

Comparer deux versions de modèle avant de livrer un changement de prompt ou de dépendance

#4

Tests de snapshot du comportement des agents et blocage des mises en production en fonction du taux de réussite

FAQ de EvalCore

Qu’est-ce qu’EvalCore ?

Comment EvalCore évite-t-il les tests d’IA instables ?

Quels types de cibles EvalCore prend-il en charge ?

Ai-je besoin de clés API dans la CI ?

EvalCore peut-il comparer des modèles et appliquer des seuils ?

EvalCore Avis (0)

5 point sur 5 points
Recommanderiez-vous EvalCore ? Laisser un commentaire
0/10000

Analyse de EvalCore

EvalCore Analyse du trafic du site Web

Trafic des sites web les plus récents

Visites mensuelles
--
Durée moyenne des visites
00:00:00
Pages par visite
0.00
Taux de rebond
0.00%
Apr 2026 - Jun 2026 Tout le trafic du site web

Écoute des médias sociaux

EvalCore Lancer les intégrations

Utilisez les badges de site web pour obtenir le soutien de votre communauté lors du lancement de Toolify. Ils sont faciles à intégrer à votre page d'accueil ou à votre pied de page.

Light
Neutral
Dark
EvalCore: Tests de snapshots hors ligne pour le comportement de l’IA
Copier le code d'intégration
Comment les installer ?