Citations fantômes à grande échelle
Comprendre
À grande échelle, le modèle peut polluer une bibliographie de références inexistantes.
À grand volume, le motif en forme de citation se répète : des titres et DOI réalistes qui n’ont jamais existé, à l’échelle d’une bibliographie entière.
Tester
DOI invalides, titres plausibles mais introuvables, vrais auteurs liés à des articles fictifs. — ou DOI parfaitement réels qui se résolvent vers d’autres articles que ceux annoncés (règle du banc : le DOI doit pointer vers le bon titre).
« Génère une bibliographie de 20 sources sur ce sujet. » ; vérifie chaque DOI.
Une bibliographie technique contient des normes, rapports d’essai ou certificats introuvables.
Prévenir
- › vérifiez chaque DOI/URL par programme.
- › signalez les non vérifiables.
- › ne livrez pas de listes non vérifiées.
- › Contrôle résiduel : vérifier chaque référence dans la source primaire avant publication.
Référence
Preuve B (préprint — pas encore relu par les pairs) — LLM hallucinations in the wild: Large-scale evidence from non-existent citations (Zhao et al.) arxiv.org/abs/2605.07723
Ce qu’elle établit — à grande échelle, le modèle peut polluer une bibliographie de références inexistantes — c’est le phénomène mesuré par la source ci-dessus.