Datacenter · 8-GPU-platform
NVIDIA HGX B200 8-GPU
En Blackwell SXM-platform med otte GPU'er og NVLink Switch-forbindelser til distribueret AI-træning og inferens. Den integreres i en OEM-server og installeres ikke som et selvstændigt udvidelseskort.
Platform, ikke et enkelt kort
Tekniske specifikationer
| Arkitektur | NVIDIA Blackwell |
|---|---|
| Platformskonfiguration | 8 x B200 SXM |
| Samlet GPU-hukommelse (NVIDIAs afrundede tal) | 1,4 TB på tværs af 8 GPU'er |
| GPU-forbindelse | NVLink 5 + NVLink 5 Switch |
| NVLink-båndbredde pr. GPU | 1,8 TB/s |
| Samlet NVLink-båndbredde | 14,4 TB/s på tværs af 8 GPU'er |
Anvendelser
- Træning og finjustering af neurale netværk.
- Inferens med LLM'er og andre neurale netværk.
- Arbejdsbelastninger med flere GPU'er og hyppig kommunikation mellem acceleratorerne.
Kompatibilitet
- HGX er en GPU-baseboardplatform, ikke et PCIe-kort eller en komplet server. CPU, system-RAM, netværk, kabinet, strømforsyning og køling afhænger af OEM-serverens konfiguration. Bekræft den komplette stykliste med systemleverandøren.
- Hukommelsen tilhører de enkelte GPU'er. NVLink gør den ikke automatisk til én GPU's lokale hukommelse; brug af flere GPU'er kræver software, der fordeler modellen eller arbejdsbelastningen.
- Det samlede NVLink-tal er summen for otte GPU'er, ikke båndbredden for én forbindelse eller servernetværket.
- Kontrollér understøttelsen af driver, CUDA/framework og operativsystem til den tilsigtede arbejdsbelastning. Virtualisering og virksomhedssoftware kan kræve separate licenser og en understøttet værtskonfiguration.
Kilder fra producenten
Specifikationerne er kontrolleret mod de angivne NVIDIA-kilder: .
Anmod om et tilbud
Anmod om et individuelt tilbud. Konfiguration, antal, destination, stand, kilde, garanti, leveringstid og øvrige transaktionsdetaljer fastlægges i jeres RFQ.