Comment ChatGPT fabrique ses réponses

· 4 min

ChatGPT ne cherche pas ses réponses dans une encyclopédie : il les fabrique mot après mot, en calculant à chaque instant la suite la plus probable du texte en cours. Ce principe unique, la prédiction de mots, explique à la fois son aisance impressionnante et ses erreurs les plus déroutantes. Le comprendre change la façon de s’en servir.

La prédiction de mots, expliquée simplement

Vous connaissez déjà une version miniature de ChatGPT : le clavier de votre téléphone. Quand vous tapez « à ce soir », il propose « bisous » ou « au bureau », parce qu’il a observé que ces mots suivent souvent les vôtres. ChatGPT repose sur la même idée, poussée à une échelle vertigineuse : au lieu de regarder les deux derniers mots, il tient compte de toute la conversation pour deviner le mot suivant, puis le suivant, jusqu’au point final.

Il n’écrit donc pas comme nous. Il n’a pas d’idée préalable qu’il mettrait ensuite en phrases : la réponse se construit au fil de l’eau, chaque mot étant retenu parce qu’il est statistiquement plausible après tout ce qui précède. Imaginez un lecteur qui aurait parcouru des millions de livres et qui excellerait à un seul jeu : compléter n’importe quel texte de la manière la plus vraisemblable possible. C’est exactement ce jeu que joue ChatGPT à chacune de vos questions.

D’où viennent ses connaissances

Pour apprendre à prédire, le programme a été entraîné sur d’immenses volumes de textes : pages web, livres, articles, discussions publiques. Il n’en a pas gardé une copie consultable, comme le ferait un moteur de recherche. Il en a retenu des régularités : quels mots vont ensemble, quelles tournures suivent quelles questions, quels faits reviennent assez souvent pour laisser une trace solide.

Une seconde étape affine ce socle : des relecteurs humains notent les réponses du système, qui apprend à privilégier celles jugées utiles et sûres. C’est ce réglage qui lui donne son ton serviable. Reste une limite structurelle : son apprentissage s’arrête à une date donnée. Sans la recherche web, activée dans certaines versions, il ignore tout de ce qui s’est produit après. Interrogé sur l’actualité, il complète alors avec ce qui lui semble plausible.

Pourquoi il paraît intelligent

Prédire du texte semble un exercice modeste. Mais bien prédire exige d’avoir capté énormément de choses : la grammaire, le style, des connaissances générales et même des formes de raisonnement, car nos écrits en sont remplis. Pour compléter correctement « si le train part à 14 h et roule deux heures, il arrive à… », il faut bien que quelque chose ressemblant à un calcul se produise. À force d’apprendre sur des textes humains, le système a absorbé une partie de la logique qu’ils contiennent.

S’ajoute un effet psychologique bien connu : nous associons spontanément l’aisance verbale à la compétence. Une réponse structurée, livrée sans la moindre hésitation, déclenche notre confiance, comme le ferait un orateur brillant. Or ChatGPT excelle précisément dans cette forme. Résumer, traduire, reformuler, adapter un ton : ces tâches où la manière compte plus que l’exactitude sont son terrain naturel.

Pourquoi il se trompe avec aplomb

Le revers tient en une phrase : pour un système de prédiction, une affirmation vraie et une affirmation vraisemblable se ressemblent beaucoup. Quand la bonne information abondait dans ses textes d’apprentissage, la suite la plus probable est aussi la plus exacte. Quand elle était rare ou ambiguë, il produit quand même une suite plausible : une référence de livre inventée, une date approximative, un article de loi qui n’existe pas. C’est ce qu’on appelle une « hallucination ».

Le plus troublant est le ton : il affirme le faux avec la même assurance que le vrai. Rien d’étonnant, là encore. L’assurance est un style d’écriture, appris comme le reste ; ce n’est pas un indicateur de fiabilité. ChatGPT ne ment pas et ne bluffe pas : il complète un texte, sans disposer d’un mécanisme interne qui distinguerait ce qu’il sait de ce qu’il invente.

Ce que ça implique pour lui faire confiance

La règle pratique découle du mécanisme. Pour tout ce qui relève de la forme (reformuler un courriel, structurer un plan, résumer un document que vous fournissez, chercher des idées), l’outil est fiable et fait gagner un temps réel : la matière première vient de vous, il n’a presque rien à inventer. Pour tout ce qui relève des faits (chiffres, dates, citations, références), la vérification reste indispensable : demandez-lui ses sources, puis recoupez-les vous-même.

Sur les sujets sensibles enfin, santé, droit ou argent, une réponse fluide ne remplace ni un professionnel ni une source officielle comme service-public.fr. ChatGPT est un moteur de texte d’une puissance inédite, pas un oracle. Ceux qui en tirent le meilleur parti l’utilisent pour ce qu’il fait vraiment : non pas dire le vrai, mais écrire le probable, remarquablement bien.