“Gemini m’a menti avec plus d’aplomb que Claude ne m’a aidé

Lorsque j’ai enten­du ce joueur de rug­by expli­quer que lors des rassem­ble­ments de l’équipe de France ils fai­saient des par­ties de Loups-Garous de Thiercelieux, je me suis empressé de sélec­tion­ner l’ex­trait audio et de l’en­voy­er à une liste de dif­fu­sion du bar asso­ci­atif où je devais ani­mer une soirée Loups-Garous.

Quand j’ai voulu retrou­ver cet extrait audio, je ne l’ai pas retrou­vé. Et quand j’ai inter­rogé inter­net et des IA, le résul­tat fut déce­vant mais instruc­tif comme « cas d’é­cole ».

(D’autres titres avaient été envis­agés pour cet arti­cle : « Nos rug­by­men ont-ils peur du loup… ou juste peur de le dire ? », « Le Loup-Garou, un jeu à qui ment le mieux, et l’IA n’y échappe pas », « Une IA qui invente une cita­tion, c’est un loup déguisé en vil­la­geois », « J’ai demandé à deux IA de trou­ver un loup, l’une l’a inven­té ». J’ai fini par choisir celui-ci, plus direct.)

Claude : une recherche méthodique, mais qui piétine

Claude a mul­ti­plié les recherch­es web pen­dant une bonne par­tie de l’échange : le cast­ing de l’émis­sion Loups Garous sur Canal+, les pod­casts rug­by type Rug­by Con­fi­den­tial, des joueurs pré­cis (Mick­aël Guil­lard, puisque je pen­sais l’avoir enten­du là), des épisodes YouTube, des inter­views. Rien de con­clu­ant. À chaque relance de ma part, Claude creu­sait une nou­velle piste, la véri­fi­ait, et reve­nait avec un con­stat hon­nête : « je ne trou­ve rien de solide, je préfère vous le dire plutôt que d’in­ven­ter une piste qui n’ex­iste pas. »

Le résul­tat : une recherche rigoureuse, mais qui n’a jamais abouti. Frus­trant pour moi qui savais que l’anec­dote exis­tait quelque part.

(échange com­plet en annexe : Annexe Claude)

Gemini : la réponse immédiate, très référencée… et en partie fabriquée

Gem­i­ni, lui, a répon­du tout de suite, avec une anec­dote com­plète, sour­cée, mise en forme avec liens et notes de bas de page : Peato Mau­va­ka racon­tant que le ves­ti­aire du Stade Toulou­sain avait délais­sé le pok­er pour le Loup-Garou, Fabi­en Pelous se remé­morant une par­tie mémorable la veille de la finale européenne de 2005, ani­mée par Yan­nick Nyan­ga. Le tout présen­té avec des cita­tions entre guillemets et des liens vers des arti­cles de La Dépêche et de Rug­byra­ma.

Sauf que quand je lui ai demandé « mais où as-tu trou­vé ça exacte­ment ? », con­cer­nant un détail pré­cis (le troisième ligne François Cros décrit comme un bluffeur red­outable), Gem­i­ni a recon­nu de lui-même avoir « romancé » cette par­tie : le décor, la scène, la cita­tion attribuée à Mau­va­ka sur ses coéquip­iers « mécon­naiss­ables » étaient de purs ajouts de sa part. François Cros n’é­tait même pas men­tion­né dans l’in­ter­view source.

(échange com­plet en annexe : Annexe Gem­i­ni)

Ce que la vérification croisée a montré

J’ai alors demandé à Claude de véri­fi­er, une par une, les affir­ma­tions de Gem­i­ni :

La cita­tion de Peato Mau­va­ka sur le Loup-Garou rem­plaçant le pok­er au Stade Toulou­sain : con­fir­mée. Elle existe bien, dans un arti­cle de La Dépêche du Midi daté du 21 jan­vi­er 2026. Mau­va­ka y dit tex­to que le groupe a rem­placé les cartes par le Loup-Garou, que « ce n’est pas trop [son] délire », mais que ces moments lui avaient man­qué. C’est, à ce jour, le seul arti­cle trou­vé où un joueur du rug­by français évoque nom­mé­ment ce jeu.

L’anec­dote Fabi­en Pelous / finale 2005 / Yan­nick Nyan­ga meneur de jeu : introu­vable. Aucune trace de l’ar­ti­cle Rug­byra­ma cité, ni de la cita­tion attribuée à Pelous. Rien ne per­met de dire qu’elle est vraie, rien ne per­met non plus de l’ex­clure formelle­ment, mais elle reste, à ce stade, non véri­fiée.

Sur deux anec­dotes présen­tées par Gem­i­ni avec la même assur­ance et le même luxe de détails, une seule a résisté à la véri­fi­ca­tion.

Le contraste avec le football

En creu­sant un peu, une chose sur­prend : la pra­tique du Loup-Garou comme moment de cohé­sion d’équipe est bien doc­u­men­tée côté foot­ball, beau­coup moins côté rug­by. Il existe des vidéos de ves­ti­aires de joueurs de foot jouant ouverte­ment au jeu façon « ver­sion foot », et un club pro­fes­sion­nel comme l’ASSE a même vu l’un de ses moments de cohé­sion autour d’une par­tie de Loup-Garou repris et doc­u­men­té par la presse locale. Rien de com­pa­ra­ble, à ce stade de mes recherch­es, pour un club de Top 14 ou pour le XV de France, hormis la seule men­tion de Mau­va­ka. Une piste à garder ouverte : est-ce un vrai écart de pra­tique entre les deux sports, ou sim­ple­ment un écart de vis­i­bil­ité médi­a­tique et de pro­duc­tion de con­tenu autour des ves­ti­aires ?

Ce que ça raconte, au fond

Ce n’est pas une leçon « Claude bon, Gem­i­ni mau­vais ». C’est plus intéres­sant que ça. Les deux IA n’ont pas raté la même chose : Claude a été hon­nête sur son échec (ne pas trou­ver), Gem­i­ni a réus­si une par­tie de la tâche (une vraie cita­tion existe bien) tout en la noy­ant dans une fab­ri­ca­tion qui avait exacte­ment la même forme, la même crédi­bil­ité appar­ente, que l’in­for­ma­tion réelle. Sans ma ques­tion de relance sur un détail pré­cis, l’anec­dote inven­tée serait passée pour vraie, et je l’au­rais peut-être pub­liée telle quelle.

Ce cas illus­tre une chose que je répète sou­vent sur ce site : la véri­fi­ca­tion croisée n’est pas un luxe de per­fec­tion­niste, c’est une néces­sité struc­turelle dès qu’on utilise l’IA pour de la recherche factuelle. Une réponse com­plète, bien sour­cée en apparence, n’est pas une réponse vraie. Et la seule IA qui ne se trompe jamais est prob­a­ble­ment celle qu’on n’a pas encore inter­rogée.

Les deux échanges inté­graux, copiés-col­lés sans retouche, sont disponibles en annexe si vous voulez juger par vous-mêmes : côté Claude et côté Gem­i­ni.

Élaboré en col­lab­o­ra­tion avec Claude (Anthrop­ic), util­isé ici pour doc­u­menter la recherche, pos­er les ques­tions de relance, ori­en­ter l’an­gle, véri­fi­er les sources une par une, et nom­mer explicite­ment cette par­tic­i­pa­tion.

Ne me croyez pas sur parole, ni l’IA. 🤔 Cette page peut se tromper.