Ia : l'explosion computationnelle, une course sans limites
Mustafa Suleyman, figure emblématique de Microsoft et ancien dirigeant d’Anthropic, dénonce une réalité vertigineuse : l'intelligence artificielle n'est plus régie par les lois de l'évolution, mais par une croissance exponentielle. Un constat qui devrait résonner auprès de tous.
Le calcul, une transformation radicale
Selon Suleyman, le changement a été colossal depuis 2010. La puissance de calcul nécessaire pour entraîner les modèles d'IA a explosé, passant de 1014 FLOPS à plus de 1026 FLOPS. Ce n'est pas une simple augmentation, mais une véritable explosion, une rupture avec les règles établies.
De la main d'oeuvre à la singularité computationnelle
Pour illustrer ce phénomène, Suleyman utilise une métaphore saisissante : imaginez une salle bondée de personnes effectuant des calculs avec des calculatrices. Autrefois, l'amélioration consistait simplement à ajouter plus de personnes avec des calculatrices. Aujourd'hui, la révolution réside dans la capacité à faire fonctionner toutes ces calculatrices simultanément, comme une seule et immense intelligence. Un virage radical, rendu possible par trois avancées majeures.
Trois piliers de la révolution
Premièrement, les puces Nvidia ont vu leurs performances bondir, passant de 312 teraflops en 2020 à 2 250 teraflops aujourd'hui, avec un rapport performance/prix supérieur à celui de ses concurrents. Deuxièmement, la mémoire HBM (High Bandwidth Memory) triplique le débit, alimentant constamment les GPU. Et troisièmement, des technologies comme NVLink et InfiniBand permettent de connecter des centaines de milliers de GPU dans des superordinateurs de l'envergure de naves industrielles. Une architecture qui défie l'imagination.
L'avertissement d'eric schmidt
Eric Schmidt, ancien PDG de Google, ajoute à cet ensemble une note d'avertissement : nous sommes à l'aube d'un effet limité, estimé entre 10 et 15% de la véritable puissance de l'IA. Les laboratoires investissent massivement, augmentant leur capacité de calcul à un rythme proche de 4x annuel, avec une multiplication de 5x du calcul par an entre 2020 et aujourd'hui. L'objectif ? La superintelligence.
Des prévisions monstrueuses
Les prévisions sont proprement hallucinantes : d'ici 2027, le calcul global de l'IA atteindra 100 millions de puces H100, soit une augmentation de 10 fois en trois ans. Microsoft, Nvidia et la course à la superintelligence sont au cœur de cette transformation. Suleyman souligne que l'on assiste à un passage de prototypes à des infrastructures massives : des clusters de 100 000 GPU, des racks de la taille d'une réfrigérateur consommant 120 kilowatts, des centres de données alimentés par l'énergie de plusieurs pays européens.
Un boom d'énergie
L'essor de l'IA est indéniablement lié à la chute vertigineuse des coûts de l'énergie solaire et des batteries. Les coûts ont chuté de près de 100 fois en 50 ans et de 97% en trois décennies. Un paradoxe stimulant, mais qui pose des questions cruciales.
La fin des chatbots, l'âge des agents
Selon Suleyman, l'IA ne se limitera plus aux chatbots. L'avenir appartient aux