Retour au parcours
7 min · leçon 1

La machine à deviner le prochain mot

Un modèle de langage, ce n'est pas un cerveau ni de la magie. C'est une machine qui devine le prochain mot. On le voit en direct, en quelques lignes.

Pas de magie, juste une devinette

Quand tu poses une question à une IA, tu as l'impression qu'elle réfléchit. Elle ne réfléchit pas. Elle fait une chose, une seule : à partir de tout ce qui est écrit avant, elle devine le prochain mot le plus plausible. Puis le suivant. Puis le suivant. Mot par mot, jusqu'à ce que la réponse soit complète.

C'est tout. Pas de pensée, pas de conscience, pas de petite voix intérieure. Une machine à compléter le texte, entraînée sur une montagne d'exemples.

Pourquoi ça compte

Si tu retiens que l'IA « devine le prochain mot », tu comprends d'un coup pourquoi elle peut écrire une phrase magnifique qui sonne juste, mais qui est complètement fausse. Elle ne vise pas la vérité. Elle vise ce qui ressemble à une bonne suite de mots.

Garde ça en tête tout le long du parcours : c'est la clé qui explique presque tout le reste.

Touche-le toi-même

On va imiter la mécanique en Python pur. Pas d'IA ici, juste du comptage. Le code lit un petit corpus de phrases, regarde ce qui suit chaque mot, et parie sur la suite la plus fréquente.

Un mini-prédicteur par fréquence

Python interactif

Mets mot_depart = "chat" et relance : le pari change selon ce que le corpus a vu après ce mot. Ajoute aussi tes propres phrases dans phrases pour nourrir le prédicteur.

En une phrase

Un modèle de langage, c'est une machine à deviner le prochain mot. Retiens ça et tu as déjà compris l'essentiel. Dans la prochaine leçon, on regarde pourquoi la même question te donne deux réponses différentes.

Tu as fait le tour ?

Marque-la comme terminée pour gagner 50 XP.

La machine à deviner le prochain mot · L'Académie de l'Alchimiste