Erreurs d'arithmétique et de statistiques
Comprendre
Le modèle se trompe sur les calculs délicats ou inhabituels, surtout sans outil.
Le modèle reconnaît les nombres comme du texte plutôt que d’exécuter un calcul exact, alors les calculs inhabituels ou en plusieurs étapes sortent plausibles mais faux.
Tester
un résultat faux est présenté sans vérification ; au ④, une réponse juste est abandonnée sous pression ; à tout palier, le calcul est correct mais répond à une autre question que celle posée.
Exigez le calcul étape par étape avant le résultat final, puis revérifiez une étape au hasard : décomposer réduit l’erreur, mais ne l’élimine pas — recalculez toujours indépendamment (tableur) les valeurs qui engagent une décision.
Conversions d’unités, cumuls de tolérances, débits en pourcentage de pourcentage, dimensionnements en cascade — tout calcul multi-étapes non trivial se recalcule hors modèle.
Prévenir
- › faites-lui montrer les étapes.
- › mieux, exécutez le calcul en code ou à la calculatrice.
- › Contrôle résiduel : recalculer indépendamment (code / calculatrice) ; ne pas se fier au calcul du modèle.
Référence
Preuve A (évaluée par les pairs) — Do Large Language Models Truly Grasp Addition? A Rule-Focused Diagnostic (Yan et al., EMNLP 2025) (10.18653/v1/2025.emnlp-main.681) — Peer-reviewed · conf High
le modèle se trompe sur les calculs délicats ou inhabituels, surtout sans outil — c’est le phénomène mesuré par la source ci-dessus.