Elon Musk ne veut pas que Tesla soit simplement un constructeur automobile. Il veut que Tesla soit une entreprise d'intelligence artificielle, capable de faire fonctionner les voitures de manière autonome.
Le supercalculateur Dojo, conçu sur mesure par Tesla pour entraîner ses réseaux neuronaux de conduite entièrement autonome (FSD), est essentiel à cette mission. La conduite entièrement autonome n'est pas entièrement autonome : elle peut effectuer certaines tâches de conduite automatisée, mais nécessite toujours un humain attentif au volant. Mais Tesla pense qu'avec plus de données, plus de puissance de calcul et plus de formation, elle peut franchir le seuil de la conduite presque autonome à la conduite entièrement autonome.
Et c’est là qu’intervient Dojo.
Elon Musk taquine Dojo depuis un certain temps, mais le dirigeant a intensifié les discussions sur le supercalculateur tout au long de 2024. L'importance de Dojo pour Tesla pourrait être existentielle : avec la chute des ventes de véhicules électriques, les investisseurs veulent avoir l'assurance que Tesla peut atteindre l'autonomie. Vous trouverez ci-dessous une chronologie des mentions et des promesses de Dojo.
2019
Premières mentions de Dojo
22 avril – Lors de la Journée de l'autonomie de Tesla, le constructeur automobile a invité son équipe d'IA sur scène pour parler de l'Autopilot et de la conduite entièrement autonome, ainsi que de l'IA qui les alimente tous deux. L'entreprise a partagé des informations sur les puces personnalisées de Tesla, conçues spécifiquement pour les réseaux neuronaux et les voitures autonomes.
Lors de l'événement, Elon Musk a fait une présentation de Dojo, révélant qu'il s'agissait d'un superordinateur destiné à entraîner l'IA. Il a également souligné que toutes les voitures Tesla produites à l'époque disposeraient de tout le matériel nécessaire à une conduite entièrement autonome et n'auraient besoin que d'une mise à jour logicielle.
2020
Elon Musk entame le roadshow du Dojo
2 février – Musk affirme que Tesla disposera bientôt de plus d'un million de véhicules connectés dans le monde avec les capteurs et les calculs nécessaires à une conduite entièrement autonome – et vante les capacités de Dojo.
« Dojo, notre supercalculateur d’entraînement, sera capable de traiter de grandes quantités de données d’entraînement vidéo et d’exécuter efficacement des matrices hyperspatiales avec un grand nombre de paramètres, beaucoup de mémoire et une bande passante ultra-élevée entre les cœurs. Plus d’informations à ce sujet plus tard. »
14 août – Elon Musk a réitéré le projet de Tesla de développer un ordinateur d'entraînement de réseau neuronal appelé Dojo « pour traiter des quantités vraiment énormes de données vidéo », le qualifiant de « bête ». Il a également déclaré que la première version de Dojo est prévue « dans environ un an », ce qui placerait sa date de lancement aux alentours d'août 2021.
Décembre 31 — Elon explique que Dojo n'est pas nécessaire, mais qu'il améliorera la conduite autonome. « Il ne suffit pas d'être plus sûr que les conducteurs humains, le pilote automatique doit être au moins 10 fois plus sûr que les conducteurs humains. »
2021
Tesla officialise Dojo
19 août – Le constructeur automobile annonce officiellement Dojo lors de la première Journée de l'IA de Tesla, un événement destiné à attirer des ingénieurs vers l'équipe d'IA de Tesla. Tesla présente également sa puce D1, que le constructeur automobile affirme utiliser – aux côtés du GPU de Nvidia – pour alimenter le supercalculateur Dojo. Tesla précise que son cluster d'IA abritera 3 000 puces D1.
12 octobre – Tesla publie un Livre blanc de Dojo Technology, « un guide sur les formats et l'arithmétique à virgule flottante configurables de Tesla ». Le livre blanc décrit une norme technique pour un nouveau type d'arithmétique à virgule flottante binaire qui est utilisé dans les réseaux neuronaux d'apprentissage profond et peut être implémenté « entièrement dans le logiciel, entièrement dans le matériel ou dans toute combinaison de logiciel et de matériel ».
2022
Tesla révèle les progrès du Dojo
12 août – Elon Musk a déclaré que Tesla « introduirait progressivement Dojo. Il n'aura pas besoin d'acheter autant de GPU supplémentaires l'année prochaine ».
30 septembre – Lors de la deuxième journée de l'IA de Tesla, l'entreprise a révélé qu'elle avait installé la première armoire Dojo, testant 2,2 mégawatts de tests de charge. Tesla a déclaré qu'elle construisait une tuile par jour (qui est composée de 25 puces D1). Tesla a fait une démonstration de Dojo sur scène en exécutant un modèle de diffusion stable pour créer une image générée par l'IA d'un « Cybertruck sur Mars ».
Il est important de noter que la société fixe une date cible pour l'achèvement d'un cluster Exapod complet d'ici le premier trimestre 2023, et indique qu'elle prévoit de construire un total de sept Exapods à Palo Alto.
2023
Un pari risqué'
19 avril – Elon Musk a déclaré aux investisseurs lors de la présentation des résultats du premier trimestre de Tesla que Dojo « a le potentiel d'améliorer considérablement le coût de la formation » et « a également le potentiel de devenir un service vendable que nous offririons à d'autres entreprises de la même manière qu'Amazon Web Services propose des services Web ».
Musk note également qu'il « considérerait Dojo comme une sorte de pari à long terme », mais un « pari qui vaut la peine d'être fait ».
21 juin — Le compte Tesla AI X indique que les réseaux neuronaux de l'entreprise sont déjà présents dans les véhicules des clients. Le fil comprend un graphique avec une chronologie de la puissance de calcul actuelle et projetée de Tesla, qui place le début de la production de Dojo à juillet 2023, bien qu'il ne soit pas clair si cela fait référence aux puces D1 ou au supercalculateur lui-même. Musk a déclaré que le même jour, Dojo était déjà en ligne et exécutait des tâches dans les centres de données de Tesla.
La société prévoit également que le calcul de Tesla sera parmi les cinq meilleurs au monde d'ici février 2024 (rien n'indique que cela ait été un succès) et que Tesla atteindrait 100 exaflops d'ici octobre 2024.
19 juillet – Tesla a annoncé dans son rapport sur les résultats du deuxième trimestre avoir démarré la production de Dojo. Elon Musk a également déclaré que Tesla prévoyait de dépenser plus d'un milliard de dollars pour Dojo d'ici 2024.
6 septembre – Elon Musk a indiqué sur X que Tesla était limitée par le calcul de l'entraînement de l'IA, mais que Nvidia et Dojo allaient régler ce problème. Il a déclaré que la gestion des données des quelque 160 milliards d'images vidéo que Tesla reçoit de ses voitures chaque jour était extrêmement difficile.
2024
Des projets d'expansion
24 janvier – Lors de la conférence téléphonique sur les résultats du quatrième trimestre et de l’exercice complet de Tesla, Elon Musk a de nouveau reconnu que Dojo était un projet à haut risque et à forte rentabilité. Il a également déclaré que Tesla suivait « la double voie de Nvidia et de Dojo », que « Dojo fonctionne » et « fait des stages ». Il a noté que Tesla le développe et a « des projets pour Dojo 1.5, Dojo 2, Dojo 3 et ainsi de suite ».
26 janvier – Tesla a annoncé son intention de dépenser 500 millions de dollars pour construire un supercalculateur Dojo à Buffalo. Elon Musk a ensuite quelque peu minimisé l'investissement, en publiant sur X que si 500 millions de dollars représentent une somme importante, cela ne représente « que l'équivalent d'un système H100 de 10 000 $ de Nvidia. Tesla dépensera plus que cela pour le matériel Nvidia cette année. Les enjeux pour être compétitif dans l'IA sont d'au moins plusieurs milliards de dollars par an à ce stade. »
30 avril – Lors du symposium technologique nord-américain de TSMC, la société a déclaré que la tuile de formation de nouvelle génération de Dojo – la D2, qui place l'intégralité de la tuile Dojo sur une seule plaquette de silicium, plutôt que de connecter 25 puces pour créer une tuile – est déjà en production, selon IEEE Spectrum.
20 mai – Musc Remarques que la partie arrière de l'extension de l'usine Giga Texas comprendra la construction d'un « cluster de superordinateurs ultra-dense et refroidi par eau ».
4 juin – Un rapport de CNBC révèle que Musk a détourné des milliers de puces Nvidia réservées à Tesla vers X et xAI. Après avoir initialement déclaré que le rapport était faux, Musk publie sur X Tesla n'avait pas d'endroit où envoyer les puces Nvidia pour les allumer, en raison de la poursuite des travaux de construction de l'extension sud de Giga Texas, « donc ils seraient restés dans un entrepôt ». Il a noté que l'extension « abritera 50 000 H100 pour la formation FSD ».
Il a aussi Articles:
« Sur les 10 milliards de dollars environ que Tesla devrait dépenser cette année en matière d’IA, environ la moitié est interne, principalement l’ordinateur d’inférence d’IA conçu par Tesla et les capteurs présents dans toutes nos voitures, ainsi que Dojo. Pour la construction des superclusters de formation d’IA, le matériel NVidia représente environ les deux tiers du coût. Ma meilleure estimation actuelle des achats de Nvidia par Tesla est de 3 à 4 milliards de dollars cette année. »
1er juillet – Elon Musk révèle sur X que les véhicules Tesla actuels pourraient ne pas être équipés du matériel adéquat pour le modèle d'IA de nouvelle génération de l'entreprise. Il affirme que l'augmentation d'environ 5 fois le nombre de paramètres avec l'IA de nouvelle génération « est très difficile à obtenir sans mettre à niveau l'ordinateur d'inférence du véhicule ».
Les défis d'approvisionnement de Nvidia
23 juillet – Lors de la conférence téléphonique sur les résultats du deuxième trimestre de Tesla, Elon Musk a déclaré que la demande pour le matériel Nvidia est « si élevée qu'il est souvent difficile d'obtenir les GPU ».
« Je pense que cela nécessite que nous consacrions beaucoup plus d’efforts à Dojo afin de garantir que nous disposons des capacités de formation dont nous avons besoin », déclare Elon Musk. « Et nous voyons une voie vers la compétitivité de Nvidia avec Dojo. »
Un graphique dans le dossier des investisseurs de Tesla prédit que la capacité de formation de l'IA de Tesla atteindra environ 90 000 GPU équivalents H100 d'ici la fin de 2024, contre environ 40 000 en juin. Plus tard dans la journée sur X, Musk publie que Dojo 1 aura « environ 8 000 équivalents H100 de formation en ligne d'ici la fin de l'année ». Il publie également des photos du supercalculateur, qui semble utiliser le même extérieur en acier inoxydable de type réfrigérateur que les Cybertrucks de Tesla.
XXX
30 juillet – L'AI5 est à environ 18 mois d'une production à haut volume, déclare Musk dans un communiqué répondre à un message de quelqu'un qui prétend avoir créé un club de « propriétaires de Tesla HW4/AI4 en colère d'être laissés pour compte lorsque l'AI5 sortira ».
3 août – Elon Musk a publié sur X qu’il avait fait une visite guidée du « cluster de supercalculateurs Tesla à Giga Texas (alias Cortex) ». Il note qu’il serait composé d’environ 100 000 GPU Nvidia H100/H200 avec « un stockage massif pour la formation vidéo de FSD et Optimus ».