Grilles d'évaluation
Grilles d'évaluation
Les grilles rendent l'évaluation cohérente : vous évaluez les résultats par rapport à des critères définis.
Les grilles d'entreprise définissent également les preuves requises pour les tâches à haut risque.
Voir aussi
Métriques d'évaluation des LLM Humain dans la boucle Portes de qualitéFAQ
Qu'est-ce qu'une grille d'évaluation ?
Un cadre de notation qui rend la qualité des résultats mesurable et cohérente.
Quelles dimensions les grilles devraient-elles inclure ?
Exactitude, clarté, sécurité, exhaustivité et utilité de la tâche.
Comment gérer la notation subjective ?
Définir des exemples et des ancres pour chaque score ; calibrer les évaluateurs.
Comment les grilles deviennent-elles des portes ?
Définir des seuils de réussite et les appliquer lors de la publication des changements de prompt/modèle.
Quelle est la première amélioration ?
Définir 3 à 5 dimensions de grille et noter un petit ensemble de tests de référence.