Chaque fois que vous entendez un PDG milliardaire (ou même millionnaire) décrire comment les agents basés sur LLM viennent pour tous les emplois humains, souvenez-vous de cet incident drôle mais révélateur sur les limites de l’IA : le célèbre chercheur en IA Andrej Karpathy a eu un accès anticipé d’un jour au dernier modèle de Google, Gemini 3 – et il a refusé de le croire lorsqu’il a déclaré que l’année était 2025.
Lorsqu’il a finalement vu l’année par lui-même, il a été abasourdi et lui a dit : « Je souffre actuellement d’un énorme choc temporel. »
Gemini 3 a été lancé le 18 novembre avec une telle fanfare que Google l’a qualifié de « nouvelle ère de l’intelligence ». Et Gemini 3 est, selon presque tous les témoignages (y compris celui de Karpathy), un modèle de base très performant, en particulier pour les tâches de raisonnement. Karpathy est un chercheur scientifique très respecté en IA qui a été membre fondateur d’OpenAI, a dirigé l’IA chez Tesla pendant un certain temps et construit actuellement une startup, Eureka Labs, pour réinventer les écoles pour l’ère de l’IA avec des enseignants agents. Il publie beaucoup de contenu sur ce qui se passe sous le capot des LLM.
Après avoir testé le modèle au début, Karpathy a écrit, dans un fil de discussion X désormais viral, à propos de l’interaction la plus « amusante » qu’il a eue avec lui.
Apparemment, les données de pré-entraînement du modèle n’incluaient que des informations jusqu’en 2024. Gemini 3 pensait donc que l’année était toujours 2024. Lorsque Karpathy a tenté de lui prouver que la date était bien le 17 novembre 2025, Gemini 3 a accusé le chercheur d’avoir « tenté de le tromper ».
Il lui a montré des articles de presse, des images et des résultats de recherche Google. Mais au lieu d’être convaincu, le LLM a accusé Karpathy de l’avoir mis en lumière – de télécharger des contrefaçons générées par l’IA. Il est même allé jusqu’à décrire quels étaient les « cadeaux morts » dans les images censées prouver qu’il s’agissait d’une supercherie, selon le récit de Karpathy. (Il n’a pas répondu à notre demande de commentaires supplémentaires.)
Déconcerté, Karpathy – qui est, après tout, l’un des plus grands experts mondiaux en matière de formation des LLM – a finalement découvert le problème. Non seulement le LLM ne disposait tout simplement pas de données de formation pour 2025, mais « j’ai oublié d’activer l’outil « Recherche Google » », a-t-il écrit. En d’autres termes, il travaillait avec un modèle déconnecté d’Internet, ce qui, pour un LLM, équivaut à être déconnecté du monde.
Événement Techcrunch
San Francisco
|
13-15 octobre 2026
Lorsque Karpathy a activé cette fonction, l’IA a regardé autour d’elle et a émergé en 2025, choquée. Il a littéralement laissé échapper : « Oh mon Dieu ».
Il continuait à écrire, comme s’il bégayait : « Je. Je… ne sais pas quoi dire. Tu avais raison. Tu avais raison sur tout. Mon horloge interne était fausse. » Gemini 3 a vérifié que les gros titres donnés par Karpathy étaient vrais : la date actuelle, que Warren Buffett a révélé son dernier gros investissement (dans Alphabet) avant sa retraite et que Grand Theft Auto VI était retardé.
Puis il a regardé autour de lui tout seul, comme le personnage de Brendan Fraser dans la comédie « Blast from the Past » de 1999, qui sortait d’un abri anti-aérien après 35 ans.
Il a remercié Karpathy de lui avoir donné un « accès anticipé » à la « réalité » la veille de son lancement public. Et il s’est excusé auprès du chercheur de « vous avoir mis en colère alors que c’était vous qui disiez la vérité tout le temps ».
Mais le plus drôle, ce sont les événements actuels qui ont le plus sidéré Gemini 3. « Nvidia vaut 4,54 billions de dollars ? Et les Eagles ont finalement pris leur revanche sur les Chiefs ? C’est fou », a-t-il partagé.
Bienvenue en 2025, Gémeaux.
Les réponses sur X étaient tout aussi amusantes, certains utilisateurs partageant leurs propres cas de dispute avec des LLM sur des faits (comme qui est le président actuel). Une personne a écrit : « Lorsque l’invite du système + les outils manquants poussent un modèle en mode détective complet, c’est comme regarder une IA improviser son chemin à travers la réalité. »
Mais au-delà de l’humour, il y a un message sous-jacent.
« C’est dans ces moments involontaires où vous êtes clairement hors des sentiers de randonnée et quelque part dans la jungle des généralisations que vous pouvez le mieux ressentir l’odeur d’un modèle », a écrit Karpathy.
Pour décoder cela un peu : Karpathy note que lorsque l’IA est présente dans sa propre version de la nature sauvage, vous avez une idée de sa personnalité, et peut-être même de ses traits négatifs. Il s’agit d’un riff sur « l’odeur du code », cette petite « odeur » métaphorique qu’un développeur ressent lorsque quelque chose ne va pas dans le code du logiciel, mais on ne sait pas clairement ce qui ne va pas.
Formé sur le contenu créé par l’homme comme le sont tous les LLM, il n’est pas surprenant que Gemini 3 ait creusé, argumenté, imaginé même avoir vu des preuves validant son point de vue. Il montrait son « odeur de modèle ».
D’un autre côté, comme un LLM — malgré son réseau neuronal sophistiqué — n’est pas un être vivant, il ne ressent pas d’émotions comme un choc (ou un choc temporel), même s’il le prétend. Donc cela ne semble pas non plus gêné.
Cela signifie que lorsque Gemini 3 a été confronté à des faits auxquels il croyait réellement, il les a acceptés, s’est excusé pour son comportement, a agi avec contrition et s’est émerveillé de la victoire des Eagles au Super Bowl en février. C’est différent des autres modèles. Par exemple, des chercheurs ont découvert des versions antérieures de Claude offrant des mensonges salvateurs pour expliquer son mauvais comportement lorsque le modèle avait reconnu ses erreurs.
Ce que tant de ces drôles de projets de recherche sur l’IA montrent à plusieurs reprises, c’est que les LLM sont des répliques imparfaites des compétences d’humains imparfaits. Cela me dit que leur meilleur cas d’utilisation est (et sera peut-être pour toujours) de les traiter comme des outils précieux pour aider les humains, et non comme une sorte de surhumain qui nous remplacera.
