Die Leistung von Intel® Gaudi® 2

Intel® Gaudi® Features
Überlegene Leistung
Mit der BF16-Software könnte die Intel® Gaudi® 2 ihre Konkurrenten übertreffen. Intel® Gaudi® 2 erzielt eine 2x bessere Leistung als sein Konkurrent.
MLPerf Benchmark
Beim MLPerf-Benchmark ist Intel® Gaudi® 2 einer von nur zwei GPUs, die für das GPT-3-Training verwendet werden.
Preis-Leistungs-Verhältnis
Mit der FP8-Software wird erwartet, dass Intel® Gaudi® 2 ein besseres Preis-Leistungs-Verhältnis hat als seine Konkurrenten.


Edgecore AGS8200 Features
Der Edgecore AGS8200 ist ideal für moderne KI- (Künstliche Intelligenz) und ML- (Maschinelles Lernen) Anwendungen. Angetrieben durch den Intel® Gaudi® 2 KI-Beschleuniger eignet sich das AGS8200 für LLM-Training (Large Language Models) und Inferencing und ermöglicht es Kunden, die Leistung von KI effizient zu nutzen.
Das System ist mit acht Intel® Habana® Gaudi® 2 Prozessoren und zwei Xeon® Sapphire-Rapids Prozessoren ausgestattet. In den Gaudi® 2-Prozessor sind 96 GB HBM2E-Speicher und 24 NICs mit 100 Gbit/s RoCEv2 RDMA integriert. Die 24 x 100Gbps NICs bieten All-to-All-Konnektivität und Scale-out intern und extern für Training, Feinabstimmung und andere DL-Verarbeitung.
Jeder Gaudi® 2-Prozessor verfügt über 21 nicht blockierende 100-Gbit/s-All-to-All-Konnektivität zu anderen Gaudi® 2-Prozessoren innerhalb des Servers, so dass Schulungen auf allen acht Intel® Gaudi® 2-Prozessoren möglich sind, ohne dass ein externer Ethernet-Switch erforderlich ist.
Jeder AGS8200 unterstützt 6 QSFP-DD-Ports für Scale-out. Die 400-Gbps-Ports können über Breakout-Kabel mit 400-Gbps-Switches oder 100-Gbps-Switches in Racks und Clustern von Intel® Gaudi® 2-basierten Knoten verbunden werden.
Der Server kann 16 x HDD/SSD + 8 x NVMe oder 8 x HDD/SSD + 16 x NVMe für Speicher beinhalten, die RAID HBA mit 0/1/10/5/6/50/60 unterstützen.
- Ausgestattet mit acht Habana® Gaudi® 2 KI-Trainingsprozessoren
- Zwei skalierbare Intel® Xeon® Prozessoren der 4. Generation
- Erweiterte Netzwerkkapazität mit 24 x 100Gbps RoCE-Ports, die in jeden Gaudi® 2 integriert sind
- 700 GB/Sekunde Skalierung innerhalb des Servers und 2,4 TB/Sekunde Skalierung nach außen
- Einfacher Systemaufbau oder Migration mit Habana® SynapseAI® Software-Stack
- Standardisierte Architektur und Ethernet anstelle von proprietärem Infiniband und NVLINK