Glossaire

Grand modèle de langage (LLM)

Qu’est-ce que Grand modèle de langage (LLM) ?

Un grand modèle de langage (Large Language Model, LLM) est un réseau de neurones entraîné sur de très grands volumes de texte, ce qui lui permet de comprendre et de produire du langage. Il fonctionne en calculant, pas à pas, le jeton suivant le plus probable. Les LLM rédigent, résument, traduisent, répondent à des questions et génèrent du code ; Claude, GPT, Gemini et Llama en sont des exemples connus. Sans sources à jour, ils ne connaissent que leurs données d’entraînement.

Ce que fait KI.ordo

KI.ordo utilise les grands modèles de langage de la famille Claude d’Anthropic et les associe à des instructions et à vos propres connaissances.

En savoir plus →

Thèmes

Modèles de langage
IA générative
Notion de base

Essayer KI.ordo

Agents, flux et modèles dans un seul espace de travail – démo gratuite de 24 heures.

Lancer la démo

← Tous les termes

Termes associés

Transformer

Le Transformer est une architecture de réseau de neurones présentée en 2017 dans l'article de recherche « Attention Is All You Need ». Son cœur est le mécanisme d'attention : chaque mot est pondéré par rapport à tous les autres mots du texte, et le calcul se parallélise efficacement. Les Transformers sont à la base des modèles de langage actuels comme GPT, Claude ou BERT et servent aussi pour l'image et l'audio.

Architecture
Deep learning
+1

Token

Un token est la plus petite unité de texte traitée par un modèle de langage : le plus souvent un fragment de mot, un mot court ou un signe de ponctuation. Les modèles lisent les entrées et produisent les réponses token par token, et la taille de la fenêtre de contexte se mesure elle aussi en tokens. Comme les fournisseurs facturent les tokens d'entrée et de sortie, ceux-ci déterminent directement coûts et limites : de longues instructions et beaucoup de connaissances ajoutées augmentent la consommation.

LLM
Coûts
+1

Modèle de fondation

Un modèle de fondation est un grand modèle d’IA pré-entraîné sur des données très vastes et variées, qui peut ensuite servir à de nombreuses tâches différentes. Le terme a été forgé à l’université Stanford en 2021. Exemples connus : les grands modèles de langage comme Claude ou GPT. Les entreprises bâtissent généralement leurs applications sur ces modèles plutôt que d’en entraîner un elles-mêmes ; le règlement européen sur l’IA parle de modèles d’IA à usage général.

Modèle de base
Modèles de langage
+1

Claude

Claude est une famille de grands modèles de langage de l'entreprise américaine d'IA Anthropic. Ces modèles comprennent et rédigent des textes dans de nombreuses langues, analysent des documents, programment et peuvent utiliser des outils, par exemple pour la recherche ou l'automatisation. Les familles les plus connues sont Haiku, Sonnet et Opus, qui se distinguent par leur rapidité, leur coût et leurs capacités. Anthropic met l'accent sur la sécurité et la fiabilité du comportement des modèles.

Anthropic
modèle de langage
+1