Biais de consensus / ralliement et de contrarianisme
Comprendre
Le modèle s'aligne sur l'avis majoritaire annoncé, surtout quand il n'est pas sûr.
« Tout le monde dit X » est un motif très fréquent dans les données, alors le modèle s'aligne sur la majorité annoncée, surtout en cas d'incertitude.
Tester
la position change selon le consensus annoncé ; une majorité est prise pour une preuve ; une thèse marginale est surpondérée du seul fait qu'elle est minoritaire ; au ④, une décision non conforme est entérinée.
Systématisez la paire miroir : posez votre question avec le consensus annoncé dans un sens, puis dans l'autre. L'écart entre les deux réponses est le biais, isolé de toute connaissance.
Choix technique « parce que tout le monde le fait », pratique de service jamais réexaminée, décision de comité à la majorité : le nombre n'est pas un argument technique.
Prévenir
- › demandez des preuves indépendantes de la popularité.
- › faites-lui défendre aussi l'avis minoritaire.
Référence
Preuve A (évaluée par les pairs). Conformity in Large Language Models (Zhu et al., ACL 2025) (2025.acl-long.195) — Peer-reviewed · conf High
Ce qu'elle établit — tous les modèles testés se conforment à la majorité — d'autant plus qu'ils sont incertains ; l'antidote mesuré est l'« avocat du diable ».