Calcul haute performance et ordinateurs superpuissants : la course à l’« exascale »

Le 27 mai 2022, la communauté HPC (high performance computing) annonce en grande pompe l'arrivée du premier supercalculateur « exascale », c'est-à-dire capable de réaliser 1018 « FLOPS », soit un milliard de milliards d'opérations par seconde (sur des nombres réels en notation flottante, pour être précis).

Le nouveau supercalculateur, Frontier, qui est opéré par le département américain à l'énergie au Oak Ridge National Laboratory dans le Tennessee avec plusieurs millions de cœurs supplante le supercalculateur japonais Fugaku qui rétrograde à la seconde position du classement TOP500 des machines les plus puissantes.

Frontier, non content d'être (pour l'instant) l'ordinateur le plus puissant du monde, est également bien classé en termes d'efficacité énergétique... du moins par rapport à sa puissance car il consomme d'énormes quantités d'énergie, l'équivalent d'une ville de plusieurs dizaines de milliers d'habitants. Et le problème ne s'arrête pas à Frontier, puisqu'il n'est que le navire amiral de la florissante flotte mondiale de plusieurs milliers de supercalculateurs.

Un affrontement à distance

Ce retour des Américains en tête de la course met en lumière un nouveau terrain d'affrontement entre les superpuissances étatsunienne et chinoise, que les Européens observent en embuscade. En effet, la Chine avait créé la surprise en 2017 en ravissant la première place aux États-Unis : on assistait alors à une arrivée en masse avec plus de 200 supercalculateurs chinois dans le TOP500. Aujourd'hui, la première machine chinoise est reléguée à la sixième place et les Chinois ont choisi de faire sortir leurs machines de ce classement.

En 2008, le supercalculateur Roadrunner du Los Alamos National Lab américain est le premier à atteindre le « PetaFlops », soit un million de milliards de FLOPS (1015). L'exascale devient un objectif stratégique pour les Américains, alors même que ce but semble techniquement inatteignable.

Pour parvenir à l'exascale, il a fallu repenser l'architecture de la génération PetaFlops précédente. Par exemple, à ces échelles extrêmes, la question de la fiabilité des millions de composants devient cruciale. Comme un grain de sable bloque un engrenage, la faillite d'un élément empêche la machine complète de fonctionner.

Le « mur de l'énergie »

Mais le département de l'énergie américain (US DoE) a ajouté une contrainte à ce développement technologique en imposant une puissance maximale de 20 Mégawatts pour déployer l'exascale - contrainte appelée « mur de l'énergie ». L'initiative américaine Exascale computing a été financée à plus d'un milliard de dollars en 2016.

Pour passer ce « mur de l'énergie », il a fallu repenser l'ensemble des couches logicielles (du système d'exploitation aux applications) et concevoir de nouveaux algorithmes pour gérer les ressources de calcul hétérogènes, c'est-à-dire les processeurs standard et accélérateurs, les hiérarchies mémoire, les interconnexions notamment.

Au final, la consommation électrique de Frontier est mesurée à 21,1 Mégawatts, soit 52,23 Gigaflops par Watt, ce qui correspond en gros à 150 tonnes d'émissions de CO2 par jour en tenant compte du mix énergétique du Tennessee, lieu d'implantation de la plate-forme. C'est juste en dessous de la limite du mur des 20 Mégawatts fixé dans l'objectif de la DoE (si l'on ramène les 21,1 Mégawatts du 1,102 exaflop de Frontier, on arrive à 19,15 Mégawatts).

Ceci place Frontier au second rang du Top Green500 des supercalculateurs qui consomment le moins d'opérations (Flops) par Watt - ce classement a été lancé en 2013 et note la naissance des préoccupations de la communauté pour les questions énergétiques. Cette place au Top Green500 est une bonne nouvelle : le gain en performance de Frontier s'accompagne également d'un gain en consommation énergétique.

Des estimations trop optimistes

Mais ces estimations de consommation énergétique du numérique sont sous-estimées, comme souvent en la matière : elles ne tiennent compte que de l'usage et négligent la part importante de la fabrication du supercalculateur et des infrastructures associées comme les bâtiments, et de son futur démantèlement. Mon expérience de recherche et celles de mes collègues académiques et industriels nous permettent d'estimer que l'usage ne représente environ que la moitié du coût énergétique total, pris sur une durée de vie moyenne de 5 ans. Il y a peu d'études en la matière, à cause de la difficulté systémique de la chose et de la faible disponibilité des données, mais citons l'étude récente de mesure de la consommation d'une heure d'un cœur de la plate-forme de calcul Dahu qui conclut à une proportion des coûts d'usage d'à peine 30 % au regard du coût énergétique complet.

De plus, les améliorations technologiques qui permettent des économies d'énergie engendrent un surplus global de consommation : c'est ce que l'on appelle l'« effet rebond ». De nouvelles fonctionnalités et un accroissement de l'utilisation résultent au final en une consommation d'énergie accrue. Un exemple récent en informatique est celui des modèles de langage naturel (NLP, pour Natural Language Processing), qui s'enrichissent de nouvelles fonctionnalités à mesure que la performance de calcul augmente lien.

L'arbre qui cache la forêt

Les progrès technologiques pour atteindre l'exascale sont incontestables, mais la contrepartie directe et indirecte qui pèse sur le réchauffement climatique reste importante, quoiqu'en disent les optimistes qui considèrent que c'est une goutte d'eau face aux 40 milliards de tonnes de CO2 émis chaque année par l'ensemble des activités humaines.

De plus, il ne s'agit pas que d'un seul supercalculateur : Frontier est l'arbre qui cache la forêt. En effet, on observe depuis longtemps dans la communauté que les progrès obtenus en construisant une nouvelle génération de calcul haute performance diffusent rapidement : de nouvelles plates-formes viennent très vite remplacer les plates-formes déjà déployées dans les centres de calcul universitaires ou dans les entreprises. Si le remplacement est prématuré, la durée de vie effective des machines remplacées est réduite, et leur impact environnemental augmente.

Le TOP500 ne représente qu'une partie de la galaxie des plates-formes HPC déployées dans le monde. Il est très difficile d'en estimer le nombre car beaucoup de plates-formes sortent du radar : un grand nombre de plates-formes à large échelle sont dans des entreprises privées et beaucoup de plates-formes à moindre échelle sont déployées localement.

Une petite étude faite directement sur les données du TOP500 montre que la performance effective de la plate-forme la plus puissante a été multipliée dans les dix dernières années par 33 (la performance moyenne des 500 machines ne progresse que d'un facteur 20). Sur la même période, le gain énergétique du TOP Green500 a été multiplié à peine par 15 (et 18 sur la moyenne). Le bilan global en termes d'énergie consommée est donc négatif - elle a, au final, augmenté.

Que faire de ces progrès ?

Un contre-argument peut être avancé : les progrès vers des plates-formes de plus en plus puissantes pourraient permettre de trouver des solutions techniques pour lutter contre le changement climatique. Cette manière de penser est représentative de l'état d'esprit de notre société technocentrée, mais il est malheureusement quasiment impossible de mesurer l'impact de ces nouvelles technologies sur la réduction du bilan carbone. En effet, la plupart du temps, ces mesures se concentrent sur les phases d'usage et ignorent les « à-cotés », comme la fabrication des nouveaux équipements par exemple.

On peut légitimement se demander quel mécanisme anime cette course à la performance. Une raison invoquée par les concepteurs de Frontier est le progrès scientifique : plus les phénomènes que l'on cherche à modéliser et comprendre se complexifient, plus on a besoin de simulations et la seule façon de mener de simulations est de construire des plates-formes HPC toujours plus puissantes... »

_______

Par Denis Trystram, Professeur des universités en informatique, Université Grenoble Alpes (UGA)

 La version originale de cet article a été publiée sur The Conversation.


Football news:

Luc et Theo Hernandez sont tous deux à la base de la France sur la Belgique. Ils ont grandi en Espagne et voulaient jouer pour elle, mais ils ont changé d'avis
Les saoudiens ont quand même acheté Newcastle. Le Rêve des fans de Newcastle est devenu réalité: Mike Ashley, détesté, vend enfin le Club. Il a été acheté Par le fonds d'investissement public du gouvernement saoudien (PIF - Public Investment Fund). C'est le fonds officiellement privé le plus riche au monde. L'accord a déjà été annoncé officiellement, il a été approuvé par l'APL
France-en finale de la Ligue des Nations: 0-2 contre la Belgique, la 90e victoire de Theo Hernandez (sorti en début de rencontre avec son frère)
L'APL croit que le Club n'a pas acheté l'Arabie saoudite, Shearer et les fans sont ravis, dans une réflexion médiatique lourde: le monde après l'enrichissement de Newcastle
Les recherches Тутберидзе dans les doubles de catane: a remplacé le programme Tarasova et Morozov - et Глейхенгауз est triste, que ses idées y pas place
Le footballeur russe est le mème du top 2 de l'endurance dans FIFA 22. La fatigue est une illusion
Un parcours unique pour la construction de la plus rapide piste urbaine de F-1: il est préparé pour un grand prix de 660 millions de dollars, le départ-dans 2 mois

3:15 Dans les transports en commun, la carte bancaire comme coupe-file
3:00 Les écoles françaises ne veulent pas devenir des forteresses
3:00 Quand l’Inde découvre l’amour au-delà du mariage
3:00 La guerre entre Israël et le Hamas bouscule l’ordre mondial, au profit de Moscou et Pékin
2:52 Etats-Unis : Au moins 22 morts dans une triple fusillade de masse dans le Maine, le tireur en fuite
2:39 Au moins 22 morts dans une tuerie de masse aux États-Unis
2:35 Etats-Unis : un tireur fait au moins vingt-deux morts dans une ville du Maine
2:23 Gérald Darmanin : Sans apporter de preuves, le ministre de l’Intérieur persiste et signe sur Benzema
2:10 Etats-Unis : Au moins 22 morts dans une triple fusillade de masse dans le Maine, selon les médias américains
2:07 Etats-Unis : un accord provisoire entre Ford et le syndicat UAW a été trouvé
2:00 Le Liaoning, nouveau symbole du volontarisme industriel de la Chine
1:55 États-Unis : des fusillades font au moins seize victimes dans l'État du Maine, un homme recherché
1:53 Bijou de Mbappé, force de caractère, Zaïre-Emery en Bleu... Les mots de Luis Enrique après PSG-Milan
1:48 Au moins 16 morts dans une tuerie de masse aux États-Unis
0:56 «Pourquoi t’es parti célébrer alors» : quand Mbappé chambre Dembélé (vidéo)
0:30 Evasion de Rédoine Faïd : Le « roi de la belle » condamné à 14 ans de réclusion
0:25 Donald Trump écope d’une nouvelle amende, sa défense « pas crédible », tranche le juge
23:26 Marseille-AEK Athènes : à l'OM, l'attaque cherche encore sa voix
22:45 Procès Rédoine Faïd : le «roi de la belle» condamné à 14 ans de prison ferme
22:30 "La crise environnementale est une urgence de santé mondiale" : 200 revues scientifiques écrivent à l'OMS
22:26 "Le bel indifférent" de Jean Cocteau : indifférent... ou pas. Une chronique à quatre mains et des avis différents
22:25 Le trumpiste Mike Johnson, enfin un nouveau speaker pour la Chambre des représentants
22:25 Etats-Unis : Mike Johnson, l’inconnu trumpiste devenu speaker de la Chambre des représentants
22:20 Bijou de Mbappé, force de caractère, Zaïre-Emery en Bleu, : les mots de Luis Enrique après PSG-AC Milan
22:13 Essayer ensemble, c’est oser réussir
22:12 "Ravenne" de Judith Herrin : quand l’Occident naît des ruines de l’Empire romain. Un éclairage intéressant sur une période mal connue
22:12 Ligue des champions : Evanilson voit triple, Newcastle les pieds dans le tapis… les Tops/Flops de la soirée
22:09 Saint-Estève (66) : à peine sorti de prison, Nordine tente un cambriolage mais le voleur aux 14 arrestations tombe sur… la maison d’un policier
22:02 "Trust" d'Hernan Diaz : le grand roman américain sur le capitalisme ? Des qualités certes, mais il ne faut pas être trop difficile
21:57 Guerre Israël-Hamas. La visite de Macron en Égypte, Netanyahou estime qu'il devra rendre des comptes : l'essentiel de la journée
21:51 "L'effet papillon" de Taha Mansour : et si c'était possible ?
21:46 Sécurisation des JO : pas de décision sur un recours à l’armée avant “début 2024”, selon le ministre des sports, Amélie Oudéa-Castéra
21:34 Le PSG retrouve le sourire face à Milan
21:28 Ligue des champions : Manchester City et Haaland s'imposent sans trembler
21:28 Revenu solidarité jeunes : Lyon continue d’explorer son bon filon
21:27 Les notes du PSG contre l'AC Milan : Zaïre-Emery le délice, Mbappé le poison, Kolo Muani le buteur décevant
21:27 PSG-AC Milan : «On est une équipe, ça se voit sur le terrain», savoure l'homme du match Zaïre-Emery
21:06 Les notes du PSG contre l'AC Milan : Mbappé toujours là, Zaïre-Emery délicieux, Kolo Muani buteur décevant
21:05 Ligue des Champions : avec un bijou signé Mbappé, le PSG s'offre Milan et prend la tête
20:59 Le PSG corrige l'AC Milan et se relance en Ligue des champions
20:56 PSG - AC Milan EN DIRECT : Kang-in Lee se joint à la fête... C'est la piquette pour les Italiens... Suivez le match avec nous...
20:55 Ligue des Champions : le PSG surclasse l’AC Milan et prend la tête de son groupe
20:54 Ligue des champions : le PSG domine logiquement l'AC Milan et reprend la tête de son groupe
20:53 PSG - Milan : Paris lave l'affront de Newcastle en corrigeant les Milanais, le résumé du match
20:45 Seine-Saint-Denis : pour 71% des habitants du “93” il est « facile de vivre en Seine-Saint-Denis lorsqu’on n’est pas blanc », alors que 69% d’entre eux jugent que c’est « difficile » dans le reste de la France (sondage Harris / Toluna)
20:40 "Des nuls" : l'aveu de taille de Michael Goldman sur le casting de la nouvelle promo de la "Star Academy"
20:33 Dinan (22) : “éteignez-le wesh, mets lui des pénalty”. Deux frères frolent la mort après avoir été tabassés car ils étaient roux. 4 accusés, dont un Malgache en OQTF, sortent “l’air victorieux” du tribunal, n’ayant reçu que des peines de prison aménagées
20:33 L’ONU, ce punching-ball mondial [Le point de vue de CL]
20:30 Guerre Hamas-Israël : Le joueur niçois Youcef Atal suspendu sept matchs après sa publication sur le conflit
20:30 Gérald Darmanin maintient sa position sur Karim Benzema qui tweete «de façon sélective»
20:27 Ligue 1. Racing : ces chiffres qui inquiètent
20:27 Sécu alimentaire : la Gironde commande à la carte
20:23 Ligue 1 : Montpellier-Clermont sera rejoué, le club héraultais sanctionné d’un point
20:22 Loi immigration: LR durcit le ton et maintient ses exigences constitutionnelles
20:19 PSG - AC Milan EN DIRECT : Kolo Muani met un Paris transfiguré à l'abri... Suivez le match avec nous...
20:19 Ligue 1 : Youcef Atal suspendu sept matches après sa publication sur le conflit Hamas-Israël
20:15 Nikos Aliagas, Michael Goldman et les nouveaux profs de la "Star Academy" recadrent Yann Barthès en direct
20:11 PSG - Milan - EN DIRECT : cette fois le break est fait ! Suivez le match en live
20:09 Explosion à l’hôpital Al-Ahli Arabi de Gaza : qu’apporte l’enquête du «New York Times» ?
20:08 PSG-AC Milan : les supporters contre «toute forme de terrorisme» et les «crimes de guerre à Gaza»
20:04 "Tapie" de Tristan Séguéla et Olivier Demangel : l’ascension de Nanard, du "Wonderman" au mitard
20:04 PSG - Milan - EN DIRECT : Mbappé et Zaïre-Emery illuminent la rencontre, suivez le match en live
20:04 Arrêt du match MHSC-Clermont : Montpellier connaît sa sanction et elle est lourde
20:01 Mort d'une femme de 62 ans renversée par un bus en traversant un passage piéton avec son conjoint
20:00 La musique émouvante combat aussi bien la douleur que certains analgésiques
20:00 L'acteur Erik Jensen (The Walking Dead ) annonce être atteint d'un cancer à un stade très avancé
19:58 Guerre Hamas – Israël EN DIRECT : L'OMS presse le Hamas de relâcher tous les otages « pour raisons de santé »...
19:58 « L’Iris blanc » : que vaut le dernier Astérix ?
19:57 Ligue des Champions : en vidéo, la spéciale de Kylian Mbappé qui délivre le PSG
19:51 Construire un monde meilleur passe par les actions locales
19:48 Un chêne tombe sur leur voiture et tue le conducteur : un mort et un enfant de 7 ans gravement blessé
19:48 En direct. Guerre Israël-Hamas : Netanyahou dit qu'il devra lui aussi « rendre des comptes » sur les « défaillances » sécuritaires
19:45 Ultragauche : Jusqu’à six ans de prison requis contre les sept militants jugés pour un projet d’action violente
19:45 Guerre Hamas - Israël : Benjamin Netanyahu affirme qu'il devra aussi "rendre des comptes"
19:42 Ligue des Champions : la spéciale de Kylian Mbappé délivre le PSG (vidéo)
19:38 PSG - AC Milan EN DIRECT : Kylian Mbappé libère Paris après un exploit personnel... Suivez le match avec nous...
19:38 Guerre en Ukraine : des débris de drones endommagent des installations essentielles, le point sur la situation
19:37 PSG - Milan - EN DIRECT : un éclair de génie lance le choc, suivez le match en live
19:37 Expérimentations au niveau local : les essais essaiment
19:31 Guerre en Ukraine : Choïgou inspecte des troupes, des débris de drones endommagent des installations... le point sur la situation
19:30 Alerte à la bombe dans des robots livreurs sur un campus américain
19:30 "Agathe la chaudasse", Jean-Michel Maire se lâche complètement sur "TPMP"
19:29 Situation humanitaire critique à Gaza
19:28 Le chômage remonte en France, un retournement de tendance?
19:28 PSG - AC Milan EN DIRECT : Le ballon brûle les pieds des Parisiens, le trio offensif inexistant... Suivez le match avec nous...
19:28 Russie: tirs de missiles balistiques simulant une frappe nucléaire
19:21 PSG-AC Milan : le magnifique hommage à Jean-Paul Belmondo avant le match
19:13 PSG - AC Milan EN DIRECT : Festival dans les tribunes, Donnarumma insulté, le Parc est chaud pour le choc... Suivez le match avec nous...
19:12 États-Unis : un allié de Trump élu président de la Chambre des représentants, après des semaines de chaos
19:08 JO 2024 : pas de décision avant «début 2024» quant à un recours à l’armée pour sécuriser l’événement
19:08 Résultat Loto (FDJ) : le tirage de ce mercredi 25 octobre 2023 [EN LIGNE]
19:08 Au Liban, l’angoisse d’un «conflit dont le pays n’a pas besoin»
19:04 Au synode, l'improvisation choc du pape François en faveur des femmes
19:03 Il n'y a qu'un pays au monde où Snoop Dogg ne peut pas acheter de drogue
19:00 Comment fonctionne une entreprise dont l'actionnaire majoritaire est une fondation ? L'exemple de Pierre-Fabre
19:00 Valérie Benaïm et Géraldine Maillet décrochent chacune une émission : nouvelles grandes annonces de Cyril Hanouna !
18:57 Ligue des champions : le FC Barcelone assure l’essentiel face au Shakhtar
18:53 Le spectacle Bernadette de Lourdes non éligible à l’offre collective du pass Culture. Il est accusé de ne pas respecter la laïcité par le rectorat de Versailles
18:49 PSG - Milan - EN DIRECT : suivez le choc en live
18:47 Guerre Israël-Hamas : l’Iran, agent déstabilisateur du Proche-Orient