Réserver un échange

Daniel & Friends / Glossaire / Évaluation de modèles (evals)

IA et automatisation

Évaluation de modèles (evals)

Les évaluations de modèles sont des tests systématiques qui mesurent la qualité des réponses d’une IA sur un ensemble de tâches typiques dont le résultat correct est vérifié. Elles jugent la précision, la cohérence, la sécurité ou le style et permettent de comparer des modèles ou des versions de prompts.

Daniel Votruba ·


En pratique

Constituez votre propre jeu de tâches réelles issues de votre travail et relancez-le à chaque changement de modèle ou de prompt. Les classements publics ne donnent qu’une orientation grossière.

Termes liés

  • Hallucination: Une hallucination est un cas où un modèle énonce une information plausible mais fausse.
  • Grand modèle de langage (LLM): Un grand modèle de langage est un modèle entraîné sur une énorme quantité de texte, qui prédit les mots suivants et sait écrire, résumer et répondre.
  • Prompt engineering: Le prompt engineering est la conception et le test de consignes pour un modèle : choix du rôle, du contexte, des exemples et du format de réponse afin que la sortie soit fiablement utilisable.
  • Sécurité de l’IA et alignement: La sécurité de l’IA (AI safety) regroupe les travaux visant à ce que les systèmes d’intelligence artificielle fonctionnent de façon sûre et prévisible.
  • Human in the loop (humain dans la boucle): Le human in the loop est une conception de processus d’IA où une personne contrôle, modifie ou valide le travail du modèle à certains points avant l’utilisation du résultat.

Autres termes du groupe IA et automatisation

Fenêtre de contexte · Embedding (plongement vectoriel) · Few-shot et zero-shot prompting · Deepfake et médias synthétiques · Fine-tuning · Coûts et limites de l’IA · Garde-fous (guardrails) · Copilot (assistant IA) · Gouvernance de l’IA · Clonage de voix (voice cloning) · GPT personnalisés et projets · ChatGPT Ads · Chain of thought (chaîne de pensée) · Grounding (ancrage) · C2PA et provenance du contenu (filigranes IA) · Biais des modèles (AI bias) · Base de données vectorielle · IA agentique · Automatisation par IA · IA explicable (XAI) · Apprentissage profond (deep learning) · IA générative · Apprentissage automatique (machine learning) · Inférence et latence

Tout le glossaire (590 termes)

Les termes en pratique

Besoin d’aide pour les mettre en œuvre ?

Les termes sont une chose, la mise en œuvre en est une autre. Nous regardons lesquels sont rentables pour vous et nous le disons franchement. Le premier avis est gratuit et nous répondons sous 24 heures.

Prendre rendez-vous

Cet article vous a plu ? Partagez-le avec vos amis.