Aller au contenu
NL-Q

Question

L'IA se trompe dans les calculs : pourquoi et que faire

Total faux, pourcentage bizarre : les causes d'une erreur de calcul de l'IA sur vos tableaux, comment la repérer et comment la faire calculer juste.

Mis à jour le

Oui, une intelligence artificielle (IA) peut se tromper dans un calcul, même simple. Un modèle de langage est d'abord fait pour rédiger du texte. Quand un chiffre apparaît dans sa réponse sans être passé par une formule ou par un programme, rien ne garantit qu'il ait été réellement calculé. Les éditeurs eux-mêmes contournent le problème en faisant calculer par des formules ou du code. Le bon réflexe est donc de demander comment le chiffre a été obtenu, puis de le recalculer par un autre chemin.

Comment les outils font calculer

Deux documentations illustrent le recours à des outils de calcul ; cela ne garantit pas que chaque réponse de chaque interface les utilise.

  • Copilot dans Excel : Microsoft indique qu'il peut effectuer des calculs et appliquer des formules sur plusieurs feuilles.
  • API Claude : Anthropic décrit un outil d'exécution de code qui permet au modèle d'analyser des données et d'effectuer des calculs complexes en exécutant du code dans un environnement isolé.

Conséquence pratique : un chiffre accompagné de sa formule ou de son code se vérifie. Un chiffre sans trace de calcul exige de reconstruire le raisonnement à partir des lignes sources. Pour faire expliquer une formule étape par étape, voir Expliquer une formule Excel héritée, pas à pas.

Cinq causes d'erreur à examiner

Cause Ce qui se passe Comment le repérer
Chiffre rédigé, pas calculé La réponse contient un nombre plausible sans calcul réel Aucune formule, aucun code, aucun détail des lignes
Mauvaise lecture du tableau Colonnes décalées, sous-totaux comptés comme des lignes, tableau tiré d'un PDF Comparer le détail additionné aux lignes sources
Mauvaise colonne « Ventes » rattaché au mauvais champ Demander quelle colonne a été utilisée
Mauvais périmètre Période, site ou type de client différent de celui voulu Relire la question comprise par l'outil
Définition implicite Hors taxes ou toutes taxes, avoirs inclus ou non Comparer à un total connu

Quelques précisions sourcées sur ces causes :

  • les tableaux tirés de documents : le guide de la direction générale des Entreprises (DGE) indique que les systèmes qui répondent à partir de documents sont en général moins performants sur les tableaux que sur le texte. Il signale la même faiblesse pour les PDF qui mêlent texte, images et tableaux ;
  • les mots ambigus : dans Power BI, Microsoft prend l'exemple du mot « Sales » (ventes), présent dans plusieurs champs. L'outil le souligne en pointillés orange et vous demande de choisir. Sans cette aide, un autre outil peut choisir à votre place.

Les contrôles à appliquer au résultat

  1. Demandez la formule, pas seulement le résultat. « Donne la formule Excel qui calcule ce total. » Appliquez-la dans une copie du classeur : un résultat identique montre une cohérence avec cette formule et cette plage, pas que la sélection des lignes est correcte.
  2. Faites écrire le résultat dans le tableur. Un total placé dans une cellule avec sa formule reste vérifiable et se met à jour. Vérifiez néanmoins que la plage de cette formule inclut les nouvelles lignes.
  3. Comparez à un repère connu. Total annuel tiré de la comptabilité, nombre de clients tiré du logiciel : un écart impose de comparer le périmètre, les données et la formule.
  4. Reposez la question autrement. Anthropic recommande de soumettre plusieurs fois la même demande et de comparer : des réponses incohérentes entre elles peuvent révéler une erreur.
  5. Vérifiez les lignes de total et les pourcentages. Écrivez séparément son numérateur et son dénominateur pour vérifier la base retenue.
  6. Nettoyez le tableau avant. Écartez les lignes de sous-total de la plage analysée, unifiez les formats, nommez clairement les colonnes : voir préparer ses données.

Vous pouvez documenter les règles de calcul dans une fiche, puis les retrouver avec un agent alimenté par vos documents, comme le présentent les fonctions d'ALMA. Demandez par exemple si la fiche inclut les avoirs dans les ventes nettes. Cette recherche établit la règle à appliquer ; pour valider le montant, utilisez les lignes et la formule dans le tableur.

Un exemple illustratif

Prenons un classeur de ventes avec les colonnes « Date », « Client », « Montant HT » (hors taxes) et, en bas de chaque mois, une ligne « Total du mois ». À la question « Quel chiffre d'affaires sur l'année ? », un outil qui additionne toute la colonne comptera chaque mois deux fois : une fois par les ventes, une fois par le total. Si chaque vente apparaît exactement une fois dans ces sous-totaux et que rien d’autre n’est additionné, le résultat sera le double du total de détail. Le remède ne tient pas à la question mais au tableau : retirer les lignes de total, ou identifier explicitement les lignes de détail et ne sommer que celles-ci. Une cellule Client vide ne suffit pas à reconnaître un sous-total : elle peut aussi signaler une saisie incomplète.

Une formule juste peut mesurer la mauvaise chose

Exemple fictif : deux ventes de 80 € et 120 €, puis un avoir de −20 €. La somme signée vaut 180 €. Si l’outil retire l’avoir, il obtient 200 € ; s’il additionne les valeurs absolues, 220 €. Les trois additions sont arithmétiquement possibles, mais elles ne répondent pas à la même définition.

Pour demander les ventes nettes de cet exemple, précisez « montants signés, avoirs inclus ». Conservez ensuite les trois lignes avec le résultat. Cela permet de distinguer une erreur de calcul d’un désaccord sur l’indicateur.

Quand faut-il se méfier le plus ?

Plus le chiffre va loin, plus il se vérifie. Un ordre de grandeur pour préparer une réunion supporte une marge d'erreur. Un chiffre envoyé à un client, à une banque ou à un associé ne la supporte pas. Anthropic rappelle que les techniques de contrôle réduisent les erreurs sans les supprimer. Validez les informations critiques avant de les reprendre. La méthode complète est sur vérifier une réponse. Pour les tableurs, suivez les contrôles proposés pour vérifier une réponse de Copilot dans Excel ou recalculer un résultat de Gemini dans Sheets.

Le pourcentage global n’est pas la moyenne des pourcentages

Exemple fictif : un atelier traite 10 demandes, dont 5 dans le délai prévu ; un autre en traite 90, dont 81 dans le délai. Leurs taux sont 50 % et 90 %. Leur moyenne simple vaut 70 %, mais le taux sur les 100 demandes est (5 + 81) / (10 + 90), soit 86 %.

Les deux résultats ont un sens différent : 70 % donne le même poids aux deux ateliers ; 86 % donne le même poids à chaque demande. Pour « quelle part des demandes a été traitée à temps ? », le second calcul correspond à la question. Exigez les effectifs derrière les taux avant de les regrouper.

Une hausse de 50 % à 60 % représente 10 points de pourcentage, ou une hausse relative de 20 %. Faites nommer l’unité de variation. Si la valeur de départ est zéro, le taux de croissance relatif n’est pas calculable par cette formule : afficher 0 % masquerait le problème.

Questions fréquentes

Comment être sûr qu'un total donné par l'IA est juste ?

Demandez la formule ou le code utilisé, appliquez-le vous-même dans le tableur, et comparez à un repère connu comme le total de la comptabilité.

Reposer la même question aide-t-il ?

Oui, comme test : Anthropic indique que des réponses différentes à la même question peuvent signaler une erreur. Si les chiffres changent, revenez à la donnée.

Sources

Pages consultées pour écrire cet article :

  1. https://platform.claude.com/docs/fr/agents-and-tools/tool-use/code-execution-tool
  2. https://support.microsoft.com/fr-fr/office/prise-en-main-de-copilot-dans-excel-d7110502-0334-4b4f-a175-a73abdfc118a
  3. https://platform.claude.com/docs/fr/test-and-evaluate/strengthen-guardrails/reduce-hallucinations
  4. https://www.entreprises.gouv.fr/files/files/Publications/2024/Guides/20241127-bro-guide-ragv4-interactif.pdf
  5. https://learn.microsoft.com/fr-fr/power-bi/natural-language/q-and-a-intro

À lire aussi