BENCHMARK

Benchmark

🌐 ECOSYSTEME DEBUTANT +10 XP

Definition

Un benchmark en intelligence artificielle est un ensemble de tests standardisés utilisés pour évaluer et comparer les performances de différents modèles ou algorithmes.

Exemple concret

Par exemple, le benchmark GLUE est souvent utilisé pour évaluer la performance des modèles de compréhension du langage naturel comme GPT-4 ou Llama sur différentes tâches linguistiques.

VOIR L'ACTU : #BENCHMARK

Questions frequentes

Qu'est-ce qu'un benchmark ? +

Un benchmark en intelligence artificielle est un ensemble de tests standardisés utilisés pour évaluer et comparer les performances de différents modèles ou algorithmes.

Comment fonctionne un benchmark en pratique ? +

Par exemple, le benchmark GLUE est souvent utilisé pour évaluer la performance des modèles de compréhension du langage naturel comme GPT-4 ou Llama sur différentes tâches linguistiques.

Quelle est la différence entre un benchmark et un LLM ? +

Benchmark et LLM sont deux concepts liés mais distincts dans l'écosystème IA. Pour approfondir : LLM, Foundation model.

NEWSLETTER BUSINESS & IA

Gardez un coup d'avance en business et IA

Chaque mardi et vendredi, l'essentiel en business & IA décryptées en 5 minutes. Gratuit, sans engagement.

+11 000 fondateurs abonnés