Fausse expertise et biais de facilité

Le biais de fausse expertise : l'illusion de la compétence transversale

Ce biais est peut-être le plus insidieux. À mesure que l'utilisateur accumule les interactions avec un LLM, une forme de familiarité s'installe. Le modèle devient un interlocuteur fluide, réactif, apparemment compétent sur tous les sujets. Cette impression est trompeuse et peut coûter très cher.

La performance apparente du modèle dans un domaine donné est largement tributaire de l'expertise de celui qui l'interroge. Un juriste spécialisé depuis dix ans en droit pénal repérera immédiatement les incohérences d'une réponse dans son domaine, qu'on pense à une formulation atypique, un raisonnement juridiquement bancal, une décision dont la structure ne correspond pas aux usages de la juridiction invoquée. En revanche, ce même juriste ne dispose d'aucun filtre équivalent lorsqu'il interroge le modèle sur un domaine qu'il ne maîtrise pas, comme la médecine, la psychologie ou la mécanique. Le modèle produira une réponse tout aussi fluide et apparemment structurée, mais l'utilisateur n'aura aucun moyen intrinsèque d'en évaluer la validité. Cela est normal, l'usage de l'IA doit aussi apprendre à être humble sur ses propres capacités en laissant aux experts le soin de trancher les questions qui les concernent.

Cette illusion de compétence transversale se renforce avec l'usage. Plus l'utilisateur constate la pertinence des réponses dans son domaine, plus il est tenté d'étendre sa confiance à des domaines qui ne sont pas les siens. C'est le mécanisme classique de l'effet de halo, documenté par Thorndike dès 1920⁴ : la qualité perçue dans un registre contamine l'évaluation dans tous les autres.

Le biais de facilité : le faux gain de temps et l'érosion de la plasticité intellectuelle

Le cinquième biais que j'identifierai n'est pas, à proprement parler, un biais du modèle. C'est un biais de l'utilisateur, et c'est, à mon sens, le plus redoutable de tous.

Les modèles actuels les plus avancés — et je recommande aujourd'hui Claude d'Anthropic pour un usage professionnel — produisent, lorsqu'ils sont correctement sollicités, des réponses d'une qualité remarquable. En matière de recherche jurisprudentielle, un prompt bien construit peut fournir des résultats qui relativisent sérieusement l'utilité de certaines solutions spécialisées facturées à prix d'or. Le problème n'est donc plus tant la qualité des réponses que la question, en amont, de savoir quand le recours à l'IA est pertinent — et quand il ne l'est pas.

C'est ici que se situe le véritable danger. La facilité d'accès à une réponse immédiate crée une tentation permanente de délégation. Pourquoi consacrer deux heures à une recherche jurisprudentielle lorsqu'un prompt bien formulé peut produire un résultat exploitable en quelques minutes ? La réponse tient en un concept que les neurosciences documentent abondamment : la plasticité cérébrale.

Le raisonnement juridique est une compétence qui se maintient par l'exercice. L'effort de recherche — parcourir les bases de données, lire les décisions dans leur intégralité, confronter les interprétations, construire soi-même la cohérence d'une argumentation — n'est pas seulement un moyen d'obtenir un résultat : c'est le processus par lequel le juriste entretient et affine sa capacité de réflexion et qu'il se rende irremplaçable. Chaque raccourci pris par l'intermédiaire de l'IA est un exercice que le cerveau ne fait plus. Sur une semaine, l'effet est imperceptible. Sur des mois ou des années d'usage systématique, le risque est celui d'une atrophie progressive des facultés analytiques — exactement comme un sportif qui cesserait l'entraînement tout en continuant à se présenter en compétition.

Le gain de temps est réel, mais il peut être trompeur. Si l'IA vous fournit en cinq minutes une synthèse jurisprudentielle que vous auriez mis deux heures à produire, vous n'avez pas gagné deux heures : vous avez perdu deux heures d'entraînement cognitif. La distinction est fondamentale. Le gain n'est légitime que dans les situations où le temps fait objectivement défaut, qu'il s'agisse d'une échéance imminente, d'une audience à préparer dans l'urgence ou d'un volume de documents à traiter qui excède les capacités humaines dans le délai imparti.

En dehors de ces situations, le recours à l'IA devrait être l'exception et non la règle. Le juriste qui utilise systématiquement l'IA pour ses recherches courantes ne devient pas un juriste augmenté : il devient, à mon sens un juriste assisté, ce qui n'est pas la même chose. Le premier conserve l'intégralité de ses capacités et y ajoute un outil ; le second voit ses capacités se réduire progressivement à mesure que l'outil prend en charge ce qu'il devrait faire lui-même et finalement s'expose à sa propre disparition.

La seconde recommandation que je formule est complémentaire de la première. Lorsque le recours à l'IA est justifié par une contrainte de temps, il convient de ne jamais se contenter d'une réponse synthétique. Au contraire : il faut exiger du modèle une analyse longue, structurée et argumentativement dense, dont la longueur est proportionnée non pas à un seuil arbitraire, mais à la complexité structurelle de la question posée : nombre de branches normatives en jeu, profondeur de la jurisprudence pertinente, degré de contradiction entre les sources applicables. L'objectif n'est pas d'obtenir une réponse prête à l'emploi, mais de produire un matériau de travail suffisamment explicite dans ses chaînes de raisonnement pour que le professionnel soit contraint de les auditer, c'est-à-dire de les lire, d'en évaluer la cohérence interne, d'en vérifier les sources alléguées et d'en écarter ce qui relève de l'inférence non fondée.

Cette approche présente un double avantage, mais aussi une exigence spécifique qu'il faut nommer. D'une part, elle préserve la démarche analytique du juriste : confronter une analyse produite par un LLM à ses propres connaissances mobilise des compétences de lecture critique comparables, en volume attentionnel, à celles qu'exige la lecture doctrinale. La différence — et elle est décisive — tient au régime épistémique : la doctrine a traversé un processus éditorial et s'inscrit dans un débat identifiable entre auteurs ; la sortie d'un modèle de langage mime cette autorité sans en offrir les garanties structurelles. Le lecteur de doctrine dialogue avec un auteur ; le lecteur de LLM audite un processus probabiliste. L'effort cognitif est comparable, mais la vigilance épistémique requise est significativement plus élevée.

D'autre part, une réponse développée expose effectivement ses propres faiblesses plus lisiblement qu'une synthèse lapidaire. La littérature sur la calibration des grands modèles de langage confirme que les réponses courtes et assertives présentent une confiance apparente souvent décorrélée de leur exactitude réelle, là où une réponse détaillée, en rendant visibles ses étapes de raisonnement, offre autant de points de vérification, et donc autant de surfaces de détection d'erreurs. Toutefois, la longueur n'est pas en soi un gage de rigueur : un modèle qui remplit des pages peut aussi diluer la pertinence dans la verbosité, ce qui constitue un autre mode de dissimulation de l'approximation. Ce qui compte n'est pas le volume, mais la densité argumentative vérifiable.

Car il faut être lucide, et l'être dans les deux directions. Pour trouver la bonne jurisprudence, les outils de recherche documentaire traditionnels — bases structurées, indexation normative, appareil critique éditorialisé — demeurent plus fiables que la génération probabiliste d'un LLM. Mais cette fiabilité méthodologique n'est pas absolue : la recherche documentaire humaine est elle-même sujette au biais de confirmation, le juriste convaincu de sa thèse tendant à sélectionner la jurisprudence qui la conforte plutôt que celle qui la contredit. L'IA n'est pas un substitut à la recherche ; c'est un éclaireur que l'on envoie en amont, dont on vérifie systématiquement le rapport, mais qui peut aussi, précisément parce qu'il n'a pas de thèse à défendre, signaler des pistes jurisprudentielles que le chercheur humain aurait inconsciemment écartées.