Les world models en IA : la prochaine frontière au-delà des LLM (guide 2026)

Surya Pratap
By Surya Pratap

19 juin 2026

12 min read

AI Research · Physical AI · 2026
Les world models en IA, la prochaine frontière au-delà des LLMIA physiqueHover to explore
Les world models apprennent le fonctionnement du réel à partir de vidéo brute et de données de simulation : physique, causalité et relations spatiales, que des LLM entraînés sur du texte ne peuvent pas saisir par construction.

Yann LeCun a quitté Meta, après 12 ans comme Chief AI Scientist, pour en construire un. Fei-Fei Li a levé 1,23 milliard de dollars pour en construire un autre. Google DeepMind a publié Genie 3, une version interactive en temps réel, en 2025. NVIDIA a lancé Cosmos, entraîné sur 20 millions d'heures de vidéo du monde réel, qui a atteint 2 millions de téléchargements dès son premier mois. Et sur r/MachineLearning, Reddit en débat depuis deux ans. Les world models (modèles du monde) sont le pari architectural le plus discuté de l'IA en ce moment et, si leurs partisans ont raison, ils sont le paradigme qui remplacera les LLM comme socle de la prochaine génération de systèmes intelligents.

Qu'est-ce qu'un world model ?

Un world model est un système d'IA conçu pour comprendre la dynamique du monde réel (physique, relations spatiales, cause et effet) en apprenant à partir de données multimodales : vidéo, images, son, mesures de capteurs et mouvement. Au lieu de prédire le token suivant d'une séquence de texte, un world model prédit ce qui se passe ensuite dans le monde, à partir d'un état actuel et d'un ensemble d'actions.

La façon la plus simple de le voir : les LLM prédisent le mot suivant. Les world models prédisent ce qui se passe ensuite : dans un espace physique, dans une simulation, dans un environnement où un agent prend des décisions. Ce passage de la prédiction du langage à la prédiction de l'environnement, c'est tout le pari.

Les world models en un coup d'œil

  • Entrée : vidéo, images, données de capteurs, environnements 3D ; pas seulement du texte
  • Sortie : prédictions d'états futurs, environnements simulés, résultats d'actions
  • Capacité centrale : raisonnement physique, intelligence spatiale, modélisation des causes et effets
  • Principaux cas d'usage : robotique, véhicules autonomes, jeu vidéo, simulation scientifique, santé
  • Avantage clé sur les LLM : ils peuvent planifier et raisonner sur des conséquences physiques sans halluciner des résultats plausibles mais physiquement impossibles

Comment fonctionnent les world models : les trois architectures

1. Transformers autorégressifs

La même architecture transformer que derrière GPT et Claude, appliquée aux données visuelles et d'environnement. Le modèle génère ses sorties séquentiellement : chaque image prédite dépend de tout ce qui précède. Cela produit un bon raisonnement de cause à effet dans le temps et sert de base à des modèles comme Genie de Google et à plusieurs systèmes de génération vidéo. La limite, c'est la vitesse : générer séquentiellement coûte cher en calcul pour les applications temps réel.

2. Transformers de diffusion

Ils partent du bruit et l'affinent progressivement jusqu'à obtenir des environnements cohérents : la même approche que Stable Diffusion et DALL·E, étendue à la 3D et à la vidéo. Les modèles de diffusion offrent une meilleure fidélité visuelle et des résultats plus photoréalistes. La plateforme Cosmos de NVIDIA utilise cette approche. Le revers : il est plus difficile de les rendre interactifs en temps réel, car le débruitage exige de nombreuses passes.

3. Joint Embedding Predictive Architecture (JEPA)

C'est la contribution emblématique de Yann LeCun et l'architecture de sa startup AMI Labs. Plutôt que de prédire les pixels bruts du futur (un gaspillage de calcul) ou les tokens d'une séquence de texte, JEPA prédit la représentation latente abstraite de l'état futur. Le modèle opère dans un espace d'embeddings interne, et non dans l'espace des pixels ou des tokens. C'est nettement plus efficace et, selon LeCun, plus proche du fonctionnement de l'intelligence biologique : quand nous planifions, nous ne rejouons pas mentalement une vidéo photoréaliste du futur ; nous raisonnons sur des représentations abstraites. LeCun a montré que JEPA peut tourner sur un seul GPU, ce qui abaisse fortement la barre de calcul par rapport aux modèles de diffusion.

Le débat LLM contre world models : ce dont Reddit débat vraiment

Les fils de r/MachineLearning et r/artificial sur le sujet sont longs et tranchants. L'argument central se divise en deux camps :

Le plaidoyer pour les world models : les LLM ont une limite structurelle

L'argument de LeCun, repris par beaucoup sur Reddit, est que les LLM hallucinent sur les questions physiques non pas faute de données d'entraînement, mais parce que les tokens de langage ne sont pas une représentation sans perte de la réalité physique. Demandez à un LLM ce qui se passe si l'on pousse une boîte vers la gauche sur une surface avec frottement. Il répondra avec des mots, mais il n'a aucune simulation interne de la masse, du coefficient de frottement ou de la géométrie de la surface. La réponse peut être statistiquement plausible et physiquement fausse. Des travaux de 2024 ont montré mathématiquement que les LLM autorégressifs ne peuvent pas apprendre toutes les fonctions calculables, y compris les fonctions de raisonnement physique sur lesquelles repose l'intelligence incarnée. Ajouter des paramètres n'y change rien : c'est un problème de structure, pas d'échelle.

« Passer [les LLM] à l'échelle ne nous permettra pas d'atteindre l'AGI. L'approche est fondamentalement limitée, car elle apprend des régularités statistiques dans le texte, pas une compréhension de la réalité physique. »

— Yann LeCun, fondateur d'AMI Labs, ancien Chief AI Scientist de Meta

La réplique des LLM : l'émergence et l'échelle n'ont pas dit leur dernier mot

Le contre-argument, défendu par Dario Amodei d'Anthropic et le camp du passage à l'échelle d'OpenAI, est que des LLM dotés d'une échelle suffisante, d'un ancrage multimodal et de l'usage d'outils convergent vers l'intelligence générale par un autre chemin. Amodei a prédit qu'un « pays de génies dans un datacenter » émergerait des LLM passés à l'échelle. La communauté ML de Reddit est partagée : les pragmatiques citent GPT-4o Vision et l'analyse d'images de Claude comme preuve que les LLM absorbent déjà la réalité physique grâce à l'entraînement multimodal. Les théoriciens répondent qu'absorber des images n'équivaut pas à simuler la physique. Comme le dit l'analyse d'Introl, le débat est « empirique plutôt que philosophique : ce sont les résultats qui désigneront le vainqueur ».

Qui construit des world models : les six acteurs à suivre

1. AMI Labs : Yann LeCun

Le pari le plus médiatisé sur les world models. LeCun a quitté Meta fin 2025 pour fonder Advanced Machine Intelligence Labs (AMI Labs) à Paris. En mars 2026, AMI a levé 1,03 milliard de dollars sur une valorisation de 3,5 milliards, le plus gros tour d'amorçage IA d'Europe, avec le soutien de NVIDIA, Jeff Bezos, Mark Cuban et Eric Schmidt. Le socle technique est JEPA (Joint Embedding Predictive Architecture), sur laquelle LeCun publie des travaux depuis des années. Applications visées : santé et robotique, où la tolérance à l'erreur est minimale et où les modèles entraînés sur du texte échouent régulièrement au raisonnement physique.

2. World Labs : Fei-Fei Li

Fondée en 2024 par Fei-Fei Li et trois professeurs de Stanford, World Labs a levé 230 millions de dollars en 2024 puis 1 milliard de dollars en série B en février 2026, menée par Autodesk (200 millions) et soutenue par NVIDIA, AMD et Andreessen Horowitz. Son premier produit, Marble, lancé en novembre 2025, est le premier world model commercialement disponible : il accepte en entrée du texte, des photos, des vidéos, des maquettes 3D et des panoramas, et produit des environnements 3D persistants et modifiables qui s'exportent directement vers Unreal Engine et Unity. Les tarifs vont de la gratuité à 95 dollars par mois. Priorité : l'intelligence spatiale pour le jeu vidéo, l'architecture, les effets visuels et la robotique.

3. Google DeepMind : Genie 3

Google DeepMind a enchaîné Genie (2024), Genie 2 (2024) et Genie 3 (août 2025). Genie 3 est un world model interactif en temps réel qui génère des environnements 3D à 24 fps en 720p avec une physique apprise par lui-même : aucune règle codée en dur, seulement une physique déduite des données. Shlomi Fruchter, directeur de recherche chez DeepMind, l'a qualifié de « premier world model interactif, temps réel et généraliste ». En février 2026, Waymo a adopté Genie 3 pour construire le Waymo World Model dédié à la simulation de conduite autonome, qui génère des scénarios de circulation rares et dangereux impossibles à capturer à grande échelle par la collecte de données réelles.

4. NVIDIA Cosmos

Cosmos de NVIDIA est une plateforme ouverte pour construire de l'IA physique : un ensemble de modèles de fondation génératifs du monde, de tokenizers et de pipelines de traitement de données destinés aux développeurs de robotique et de véhicules autonomes. Entraîné sur 20 millions d'heures de vidéo réelle et 9 000 000 milliards de tokens, il a atteint 2 millions de téléchargements en janvier 2026. Il existe en trois niveaux : Nano (déploiement en edge), Super (usage général) et Ultra (qualité maximale). Cosmos est la manière dont NVIDIA se positionne non plus seulement comme fabricant de puces, mais comme la couche plateforme du développement de l'IA physique : entraîner le world model sur du matériel NVIDIA, faire tourner l'inférence sur du matériel NVIDIA, déployer sur des robots et des véhicules équipés de NVIDIA.

5. Decart : Oasis

Fondée en 2023 par Dean Leitersdorf et Moshe Shalev, Decart a levé plus de 150 millions de dollars (dont une série B de 100 millions sur une valorisation de 3,1 milliards) auprès d'Amazon AWS, Comcast et NVIDIA. Son produit, Oasis, est un « monde jouable généré par l'IA » : un environnement interactif en temps réel conçu pour le jeu vidéo, la simulation et l'entraînement de robots. L'approche technique combine des optimisations d'infrastructure propriétaires pour réduire les coûts de calcul et des modèles génératifs qui préservent les relations spatiales et la fidélité physique.

6. Meta (toujours) et Runway

Malgré le départ de LeCun, Meta continue d'investir dans la recherche sur les world models via FAIR. Runway, l'entreprise de vidéo IA, présente explicitement son modèle Gen-4.5 comme un world model ; il occupe actuellement la première place du classement Video Arena, devant Veo 3 de Google et Sora 2 Pro d'OpenAI. Le positionnement de Runway est révélateur : la course à la génération vidéo et celle des world models ont convergé. La génération vidéo haute fidélité devient de plus en plus indiscernable de la simulation d'environnements.

Les quatre grandes applications concrètes aujourd'hui

Véhicules autonomes

C'est l'application commerciale la plus mûre. Waymo, Tesla et Wayve utilisent tous des world models pour générer des scénarios de conduite synthétiques (pluie, verglas, cyclistes qui grillent un feu rouge, piétons qui descendent du trottoir) qu'il faudrait des années pour rencontrer dans la collecte de données réelles. Un world model entraîné sur 20 millions d'heures de conduite réelle peut générer autant de variantes que l'on veut de n'importe quel scénario, offrant aux équipes de conduite autonome un corpus d'entraînement quasi illimité pour les événements rares et dangereux. Le Waymo World Model (construit sur Genie 3) en est l'exemple le plus clair en production en 2026.

Robotique

Entraîner des robots physiques sans world models exige soit des millions d'essais réels (coûteux, lents et qui abîment le matériel), soit des environnements de simulation codés à la main (fragiles et limités). Les world models permettent aux équipes de robotique de générer à grande échelle des entrepôts photoréalistes, des interactions avec des objets et des modes de défaillance. Le problème du transfert de la simulation au réel (des robots entraînés en simulation qui échouent dans le monde réel parce que la simulation était trop parfaite) est traité de front par des world models entraînés sur de la vidéo réelle, qui ont appris l'imperfection physique authentique. Le CEO de Boston Dynamics a présenté le développement de l'IA comme central dans leurs progrès récents, et NVIDIA Cosmos est conçu précisément pour ce cas d'usage.

Jeu vidéo et médias interactifs

Marble de World Labs et Oasis de Decart sont déjà disponibles commercialement pour les équipes de développement de jeux. Le cas d'usage est convaincant : au lieu de fabriquer à la main chaque ressource de chaque environnement, un world model génère des environnements 3D cohérents et respectueux de la physique à partir de descriptions textuelles ou d'images de référence. Plus radicalement, des world models interactifs en temps réel comme Genie 3 laissent entrevoir un avenir où la distinction entre « moteur de jeu » et « modèle d'IA » disparaît : tout le monde du jeu est généré à la volée en réponse aux actions du joueur.

Simulation scientifique et santé

C'est l'horizon le plus lointain, mais potentiellement le plus précieux. Des world models capables de simuler des interactions moléculaires pourraient raccourcir les délais de découverte de médicaments. Des modèles climatiques qui apprennent de données environnementales réelles plutôt que d'équations physiques codées à la main pourraient améliorer la précision des prévisions. Des simulateurs de formation médicale fondés sur des world models pourraient permettre aux chirurgiens de s'entraîner à des interventions rares dans des environnements photoréalistes. Le choix d'AMI Labs de cibler la santé, un domaine où halluciner est littéralement dangereux, est un signal délibéré sur l'endroit où LeCun pense que les world models feront d'abord leurs preuves.

La réalité de l'infrastructure : les world models coûtent cher

C'est le point sur lequel les pragmatiques de Reddit insistent sans relâche, et ils ont raison. L'inférence d'un world model exige 8 à 32 GPU par requête, contre 1 à 8 pour l'inférence d'un LLM. L'entraînement en demande des milliers à des dizaines de milliers. Le stockage des données d'entraînement à l'échelle de la vidéo se mesure en pétaoctets : une seule heure de vidéo de qualité pèse environ 100GB. Ces chiffres signifient que les world models ne sont pas encore une commodité. Ce sont une technologie de pointe aux coûts d'infrastructure de pointe, accessible seulement aux équipes bien financées ou à celles qui utilisent des plateformes dédiées comme Cosmos.

DimensionLLMWorld model
Entrée principaleTokens de texteVidéo, images, données de capteurs
Ce qu'il préditToken suivantÉtat suivant du monde
Raisonnement physiqueFaible (statistique)Fort (appris)
GPU d'inférence (est.)1–88–32
Idéal pourLangage, raisonnement, codeRobotique, VA, simulation
Maturité commercialeÉlevéePrécoce (2025–2026)

Ce que cela change pour les fondateurs qui construisent des produits d'IA

Le basculement vers les world models est réel et il s'accélère. Voici comment l'aborder si vous construisez un produit ou si vous évaluez le paysage :

Si vous travaillez sur des données physiques, utilisez les plateformes. NVIDIA Cosmos et Marble de World Labs sont déjà disponibles. Si votre produit touche à la robotique, aux systèmes autonomes, à la simulation industrielle, aux environnements de jeu ou à l'architecture, ces plateformes vous donnent des capacités de world model sans partir de zéro. La logique qui valait pour les API de LLM en 2022 vaut pour les plateformes de world models en 2026 : intégrez la plateforme, construisez l'application.

Si vous construisez des produits basés sur des LLM, les world models sont complémentaires, pas un remplacement. À court terme, la réalité est hybride : les LLM gèrent le langage et le raisonnement, les world models les tâches spatiales et physiques. Les produits les plus intéressants de 2026–2027 combineront les deux. Voyez le LLM comme la couche de planification et de communication, et le world model comme la couche de perception et de simulation. Cursor, avant son rachat par SpaceX, commençait à explorer exactement ce type d'intégration pour des workflows du code vers la 3D.

Le fossé des données se déplace. Pour les LLM, le fossé des données d'entraînement, c'est le texte. Pour les world models, c'est la vidéo et les données de capteurs du monde réel. Les entreprises qui ont des caméras dans le monde réel (Tesla, Waymo, exploitants d'entrepôts, acteurs de santé) disposent d'un avantage structurel de données pour entraîner des world models, impossible à reproduire en aspirant internet. Si vous construisez dans l'un de ces secteurs, les données propriétaires que vous générez à partir de vos utilisateurs et de vos capteurs valent peut-être plus que votre logiciel lui-même.

Sources

IdeaToMVP Academy

Want to build with AI — not just read about it?

4-week live cohort for founders. Learn to ship AI agents, scope MVPs, and automate your business — taught by the same team that writes these guides.

Explore the Academy →
Share this post :