Datacenter · SXM
NVIDIA H100 SXM 80 GB
Et H100 Hopper SXM-modul med 80 GB HBM3 og NVLink-forbindelse til integrerede servere med flere GPU'er. Dets hukommelsessystem og effektramme adskiller sig fra PCIe-kortet med 80 GB.
Tekniske specifikationer
| Arkitektur | NVIDIA Hopper |
|---|---|
| GPU-hukommelse | 80 GB HBM3 |
| Hukommelsesbåndbredde | 3,35 TB/s |
| Modulformat | SXM5 |
| NVLink-båndbredde pr. GPU | 900 GB/s |
| Maksimalt TDP | Op til 700 W, konfigurerbart |
| MIG | Op til 7 instanser |
Anvendelser
- Træning og finjustering af neurale netværk.
- Inferens med LLM'er og andre neurale netværk.
- Videnskabelige simuleringer og GPU-accelereret dataanalyse.
Kompatibilitet
- Dette er et SXM-modul, ikke et PCIe-udvidelseskort. Det kræver et matchende GPU-baseboard samt firmware, strømforsyning og køling, der er valideret af serverproducenten. SXM-generationer kan ikke udskiftes indbyrdes.
- Hukommelsen tilhører de enkelte GPU'er. NVLink gør den ikke automatisk til én GPU's lokale hukommelse; brug af flere GPU'er kræver software, der fordeler modellen eller arbejdsbelastningen.
- Kontrollér understøttelsen af driver, CUDA/framework og operativsystem til den tilsigtede arbejdsbelastning. Virtualisering og virksomhedssoftware kan kræve separate licenser og en understøttet værtskonfiguration.
Kilder fra producenten
Specifikationerne er kontrolleret mod de angivne NVIDIA-kilder: .
Anmod om et tilbud
Anmod om et individuelt tilbud. Konfiguration, antal, destination, stand, kilde, garanti, leveringstid og øvrige transaktionsdetaljer fastlægges i jeres RFQ.