IA générative : comment fonctionne ChatGPT, Claude ou Gemini ?

Générer plutôt que classer

Pendant longtemps, l'IA servait surtout à reconnaître ou classer : ce mail est-il un spam ? Cette photo contient-elle un chat ? L'IA générative va plus loin : elle crée du contenu nouveau, du texte, des images, du son ou du code, à partir d'une demande formulée en langage courant.

Les grands modèles de langage (LLM)

Les assistants comme ChatGPT, Claude ou Gemini reposent sur des grands modèles de langage (en anglais Large Language Models, ou LLM). Ils ont été entraînés sur d'immenses quantités de textes pour apprendre comment les mots s'enchaînent dans une langue.

Le principe : prédire la suite

Un LLM produit sa réponse morceau par morceau. À chaque étape, il estime quel est le morceau de texte le plus probable pour continuer, compte tenu de la question et de tout ce qu'il a déjà écrit. Ces morceaux s'appellent des tokens : ce sont des mots ou des bouts de mots.

Par exemple, après « Le chat dort sur le… », le modèle juge très probables « canapé » ou « lit ». En répétant cette opération des centaines de fois, il construit des phrases, des paragraphes, puis une réponse complète.

Ce que ça implique

• Une réponse peut sonner juste sans être vraie. Le modèle produit un texte plausible, pas forcément exact : il faut vérifier les informations importantes.
• La façon de demander compte. Plus la demande (le prompt) est précise, plus la réponse est utile.
• Les connaissances ont une date. Un modèle connaît surtout ce qu'il a vu pendant son entraînement, sauf s'il peut faire des recherches.

Et chez DreamTech ?

Le module « Découvrir l'IA » du programme est consacré au potentiel de l'IA générative, à ses limites et à ses usages. Les participantes l'utilisent ensuite concrètement pour prototyper le produit de leur équipe.