PCIe-kaart vermindert energieverbruik in AI-servers aanzienlijk
Tijdens CES 2024 introduceerty het Koreaanse DEEPX de DX-H1. Dit is een PCIe-kaart die is ontworpen om de prestaties van AI-servers te versnellen en tegelijkertijd het energieverbruik te verlagen. De DX-H1, die in aanloop naar de beurs in Las Vegas de CES 2024 Innovatie Award heeft gewonnen in de categorie Computer Hardware en Componenten, legt de nadruk op prestaties, energie-efficiëntie en kosteneffectiviteit.
De PCIe-versnellerkaart biedt een uitzonderlijke energie/prestatie-efficiëntie die de huidige GPU-gebaseerde oplossingen met meer dan 10 keer overtreft. Hierdoor kan deze kaart wellicht een significante rol gaan spelen in het verminderen van koolstofemissies voor AI-servers en datacenters.
De markt voor AI-servers is afhankelijk van energie-intensieve GPU's, waarvan het hoge energieverbruik leidt tot aanzienlijke koolstofemissies. De noodzaak om de milieueffecten te minimaliseren en de efficiëntie te verhogen, met name in datacenters, stimuleert de vraag naar duurzamere, energiezuinige AI-accelerators. Analisten verwachten dan ook dat deze markt snel zal gaan groeien. Uit projecties van TrendForce blijkt bijvoorbeeld dat de markt voor AI-servers zal groeien met een samengestelde jaarlijkse groei (CAGR) van meer dan 36% tot 2027. Voor datacenters die tegelijkertijd koolstofemissies willen beperken en een competitief voordeel willen behalen door AI-prestaties van topniveau mogelijk te maken, vertegenwoordigen producten zoals de DX-H1 een mogelijke oplossing.
DEEPX heeft twee nieuwe technologieën ontwikkeld. Dat is allereerst IQ8. Dit is een manier om AI-modellen te comprimeren, waardoor dataverwerking als het trainen van modellen sneller kan gebeuren. Smart Memory Access minimaliseert het gebruik van D-RAM tot minder dan een tiende van de typische GPU-niveaus, wat met name gunstig is voor inferentie-workloads.
De DX-H1 integreert ook met bestaande GPU’sen biedt een interface om door GPU’s getrainde AI-modellen te ondersteunen. Dit maakt een overgang mogelijk voor bedrijven die de prestaties willen verbeteren zonder de noodzaak van systeemwijzigingen.
Meer over
Lees ook
Datacenters krijgen te maken met nieuw type processor: DPU’s
Met de opkomst van trends als AI krijgen datacenters plotsklaps te maken met een hele nieuwe categorie aan hardware. Systemen die ook andere energieprofielen kennen dan standaard servers en die bovendien gebruik maken van nieuwe componenten. Zoals DPU’s.
‘Energiegebruik servers kan drastisch omlaag’
De Nederlandse Save Energy Foundation is niet de enige partij die van mening is dat het energieverbruik van servers in datacenters for omlaag kan. Ook het Uptime Institute heeft onderzoek gedaan naar het elektriciteitsverbruik van servers in relatie tot hun belasting met IT-workloads.
Onder invloed van AI groeien server-verkopen enorm
De verkopen van servers die worden in gezet voor AI-toepassingen vertonen een enorme groei. Volgens onderzoeksbureau TrendForce gaat het dit jaar alleen al om een toename van 34 procent. Aan datacenters de taak om al deze apparatuur een plekje te geven.