Évaluation des candidatures LLM : mesures, LLM-as-juge et benchmarks
Lorsque vous expédiez une candidature LLM, comment savez-vous qu’elle s’améliore et non qu’elle empire ? Contrairement à un classificateur où la précision vous dit tout, les applications LLM produisent des résultats ouverts qui nécessitent une évaluation multidimensionnelle. Cette leçon couvre l'ensemble de la pile d'évaluation : des métriques automatiques que vous pouvez exécuter dans CI, au LLM-as-juge qui met à l'échelle l'évaluation au niveau humain, en passant par les références publiques qui vous permettent de comparer votre modèle avec le terrain.