Nvidia a dévoilé le supercalculateur DGX GH200 AI, qui sera capable de jusqu’à 1 exaflop de performances

Alors que les systèmes d’IA étonnent et alarment le monde dans une égale mesure, ils sont sur le point de devenir encore plus puissants. Nvidia a annoncé une nouvelle classe de superordinateurs qui formeront la prochaine génération de modèles d’IA et nous mettront tous au chômage beaucoup plus rapidement.

Le nouveau système est connu sous le nom de Nvidia DGX GH200, et il sera apparemment capable d’un énorme 1 exaflop de performances. Entre les 256 « superpuces » GH200 dont il est composé, le système contiendra une étonnante mémoire partagée de 144 To, soit 500 fois plus que le précédent supercalculateur de Nvidia, le DGX A100, dévoilé il y a à peine trois ans.

Pour essorer jusqu’à la dernière goutte de puissance, chaque superpuce GH200 est composée du processeur Grace de la société et du processeur graphique H100 Tensor Core dans un seul boîtier, leur permettant de communiquer entre eux sept fois plus rapidement qu’une connexion PCIe et en utilisant seulement un cinquième de la électricité. Ils seront tous connectés ensemble via le système de commutation Nvidia NVLink, pour fonctionner ensemble comme un seul gros GPU.

Le supercalculateur résultant sera utilisé pour former les successeurs de ChatGPT et d’autres modèles d’IA générative et de grands langages. Ce système d’intelligence artificielle le plus célèbre a été formé sur un superordinateur personnalisé que Microsoft a construit à partir de dizaines de milliers de GPU A100 antérieurs de Nvidia. La société est une fois de plus parmi les premières en ligne pour le nouvel équipement, avec Meta et Google Cloud.

Nvidia ne se contente pas de fournir des équipements à d’autres entreprises, elle a également annoncé son intention de construire son propre supercalculateur basé sur DGX GH200 nommé Helios. Prévu pour être lancé d’ici la fin de 2023, Helios sera composé de quatre systèmes DGX GH200, soit 1 024 superchips GH200, mis en réseau. Cela le rendrait capable d’un total de 4 exaflops de performances, ce qui ressemble à une quantité de puissance époustouflante.

Mais bien sûr, il y a une mise en garde à ces chiffres. Actuellement, le supercalculateur le plus puissant au monde est le Frontier du DOE américain, à 1,194 exaflops , et à première vue, il peut sembler que l’Helios de Nvidia sera quatre fois plus puissant – mais il compare des pommes et des oranges. Nvidia utilise une mesure moins précise appelée FP8, tandis que les supercalculateurs sont généralement classés à l’aide de FP64 à double précision. S’il était converti en FP64, Helios craquerait environ 36 pétaflops, soit 0,036 exaflops.

Cela dit, Helios et les superpuces DGX GH200 sur lesquelles il est basé sont toujours des outils incroyablement puissants, et ils seront capables de produire des modèles d’IA en quelques semaines au lieu de plusieurs mois, selon Nvidia. Nous, simples humains, ferions mieux de peaufiner nos CV.

https://nvidianews.nvidia.com/news/nvidia-announces-dgx-gh200-ai-supercomputer

https://resources.nvidia.com/en-us-dgx-gh200/nvidia-dgx-gh200-datasheet-web-us