Nieuwe generatie AI-chips van Nvidia gaan 1000 Watt verbruiken

nvidia-a100-hgx-3qtr-front-left-2c50-l@2x

Er komen - zeg maar - interessante tijden aan voor datacenters die veel AI-workloads draaien. Nvidia’s volgende generatie AI-GPU's, met de codenaam Blackwell, belooft een aanzienlijke sprong voorwaarts in rekenkracht, maar met een aanzienlijke toename van het energieverbruik. Volgens informatie onthuld door Dell, een van 's werelds grootste serverfabrikanten, en gerapporteerd door Tom’s Hardware, zullen deze nieuwe GPU's tot wel 1000 watt verbruiken. Dat is een stijging van 40% ten opzichte van de huidige generatie. Deze toename in energiebehoefte kan een flinke uitdaging vormen voor zowel de koeltechnologieën als de infrastructuur van datacenters.

De toename in energieverbruik van Nvidia's Blackwell GPU's heeft directe implicaties voor datacenters. Enerzijds biedt het een aanzienlijke verbetering in AI-verwerkingsmogelijkheden, wat cruciaal is voor high-performance computing (HPC) en AI-toepassingen. Anderzijds introduceert het de noodzaak voor geavanceerde koelsystemen om de warmte die door deze krachtige chips wordt gegenereerd, efficiënt af te voeren.

De potentiële introductie van een zogeheten ‘dual-die’ ontwerp, iets wat Nvidia voorheen niet heeft geïmplementeerd, wijst op een strategie om de warmteverdeling over een groter oppervlak te optimaliseren, vergelijkbaar met benaderingen van AMD en Intel. Dit zou kunnen betekenen dat datacenters hun koelstrategieën moeten herzien om oververhitting te voorkomen, wat de betrouwbaarheid en levensduur van de apparatuur kan beïnvloeden.

Voor datacenters kan de stijging in energieverbruik ook een toename in operationele kosten betekenen, met name op het gebied van energie en koeling. Dit kan niet alleen financiële implicaties hebben, maar ook milieu-overwegingen, gezien de grotere CO2-footprint die gepaard kan gaan met hoger energieverbruik.

 

Lees ook
Onderzoek biedt nieuwe inzichten in energiegebruik van AI-toepassingen

Onderzoek biedt nieuwe inzichten in energiegebruik van AI-toepassingen

In een recente studie hebben onderzoekers van het AI-startup Hugging Face in samenwerking met de Carnegie Mellon University belangrijke gegevens verzameld over de ecologische voetafdruk van kunstmatige intelligentie (AI), met name gericht op het genereren van afbeeldingen en tekst. Dit onderzoek werpt een nieuw licht op de energievereisten van AI-1

Kitepower: mogelijke oplossing voor duurzame backup power?

Kitepower: mogelijke oplossing voor duurzame backup power?

In de voortdurende zoektocht naar duurzame energieoplossingen is een interessante innovatie verschenen: Kitepower. Deze technologie, die potentieel een alternatief biedt voor traditionele dieselgeneratoren, is ontwikkeld door de gelijknamige Nederlandse start-up. Medeoprichter Johannes Peschel deelde zijn inzichten met Change Inc., waaruit blijkt1

De invloed van netcongestie en energie op de datacenterwereld

De invloed van netcongestie en energie op de datacenterwereld

Een van de grootste uitdagingen waar de datacenterindustrie mee te maken heeft, is netcongestie. Dit treedt op wanneer de vraag naar elektriciteit het vermogen van het elektriciteitsnetwerk overstijgt, wat de up time en betrouwbaarheid van datacenters kan beïnvloeden.