Le PDG de Meta, Mark Zuckerberg, a publié sur Instagram Reels le 18 janvier que la « feuille de route future » de l'entreprise pour l'IA nécessite la construction d'une « infrastructure informatique massive » qui sera alimentée par 350 000 puces Nvidia H100 d'ici la fin de 2024.
Mark Zuckerberg affirme que l'IA est la principale priorité d'investissement de Meta en 2024. |
Zuckerberg n'a pas précisé le nombre de GPU qu'il avait achetés, mais la Nvidia H100 devrait arriver sur le marché fin 2022 et son stock est extrêmement limité. Les analystes de Raymond James estiment que Nvidia vend le H100 entre 25 000 et 30 000 dollars. Sur eBay, la puce peut atteindre plus de 40 000 dollars. Si Meta obtient un prix inférieur, le coût avoisinerait les 9 milliards de dollars.
Par ailleurs, le PDG de Meta a également révélé qu'en incluant d'autres GPU, la puissance de calcul de l'infrastructure équivaudrait à 600 000 H100. En décembre 2023, Meta, OpenAI et Microsoft ont annoncé qu'ils utiliseraient la nouvelle puce d'IA Instinct MI300X d'AMD.
Meta a besoin de tant de puces informatiques « lourdes » car l'entreprise poursuit son développement sur l'intelligence artificielle générale (IAG), que Zuckerberg qualifie de « vision à long terme ». OpenAI et DeepMind de Google travaillent également sur l'IAG, une IA futuriste qui devrait rivaliser avec l'intelligence humaine.
Yann LeCun, directeur scientifique de Meta, a également souligné l'importance des GPU lors d'un événement le mois dernier à San Francisco, aux États-Unis. Il a déclaré que pour l'IA générale, il fallait acheter davantage de GPU. « Il y a une course à l'IA et c'est lui (Jensen Huang, PDG de Nvidia) qui fournit les armes. »
Dans son rapport sur les résultats du troisième trimestre 2023, Meta a annoncé que ses dépenses totales en 2024 se situeraient entre 94 et 99 milliards de dollars, notamment pour développer ses capacités de calcul. Lors d'une réunion avec les analystes, le directeur général du groupe a également confirmé que « l'IA constitue le principal domaine d'investissement en 2024, tant en termes de technologie que de ressources informatiques ».
Mark Zuckerberg a déclaré que Meta prévoyait de « rendre le code source ouvert de manière responsable » du modèle « d'IA générale » qu'il développe, une approche que l'entreprise a adoptée avec sa vaste gamme de produits linguistiques Llama.
Meta forme actuellement Llama 3, tout en aidant l'équipe de recherche fondamentale en IA (FAIR) et l'équipe de recherche GenAI à travailler plus étroitement ensemble.
Source
Comment (0)