NVIDIA H200 SXM 141 GB

NVIDIA H200 SXM 141 GB — 141 Гб HBM3e, 16 896 ядер, GPI 67,4

Загружаемся...

Оценка производительности

GPU от NVIDIA на процессоре GH100. NVIDIA H200 SXM 141 GB содержит 141 Гб видеопамяти HBM3e. Шина 6144 бит, пропускная способность 4.89 TB/s. NVIDIA H200 SXM 141 GB имеет 16896 CUDA ядер. 5 nm техпроцесс в TSMC.

A100 A100
H200 H200
MI325X MI325X

NVIDIA H200 SXM 141 GB

67,4

NVIDIA H200 SXM 141 GB

67,4

Память

Объем памяти

141 ГБ

Тип памяти

Пропускная способность памяти

4.89 TB/s

Ширина шины памяти

6 144 бит
8 192 бит
(AMD Radeon Instinct MI325X)

ML-производительность

FP16 (half)

267,6 TFLOPS
998,4 TFLOPS
(Intel UHD Graphics 730)

BF16

Нет TFLOPS
311,84 TFLOPS
(NVIDIA A800 SXM4 80 GB)

TF32

Нет

Вычислительная мощность

FP32 (float)

66,91 TFLOPS
1 425,0 TFLOPS
(Matrox D1480 Quad DisplayPort)

FP64 (double)

33,45 TFLOPS
1 204 000,0 TFLOPS
(AMD Radeon RX 7900M)

CUDA ядра

RT ядра

Архитектура и совместимость

Архитектура GPU

Hopper

SM (Streaming Multiprocessor)

PCIe версия

PCIe 5.0 x16

Программная поддержка ML

CUDA версия

Частоты и производительность

Base Clock

1 500

Boost Clock

Memory Clock

1 593

Энергопотребление

TDP/TGP

700 W
unknown
(NVIDIA CMP 70HX)

Рекомендуемый БП

Разъём питания

8-pin EPS

Рендеринг

Текстурные блоки (TMU)

Бенчмарки

MLPerf, llama2-70b-99.9 (UNSET)

3 534 tokens/s
1 983 tokens/s
(AMD Radeon Instinct MI300X)

MLPerf, llama2-70b-99.9 (fp16)

3 553 tokens/s
1 740 tokens/s
(AMD Radeon Instinct MI300X)

MLPerf, llama2-70b-99.9 (fp8)

2 444 tokens/s
2 106 tokens/s
(NVIDIA H100 SXM5 94 GB)

MLPerf, llama3.1-405b (fp16)

40.8 tokens/s
34.8 tokens/s
(AMD Radeon Instinct MI300X)

MLPerf, llama3.1-405b (fp8)

25.3 tokens/s

MLPerf, llama3.1-8b (fp8)

5 161 tokens/s

MLPerf, deepseek-r1 (fp8)

1 113 tokens/s

MLPerf, mixtral-8x7b (fp8)

7 132 tokens/s
6 975 tokens/s
(AMD Radeon Instinct MI325X)

Дополнительно

Слоты

SXM Module
SXM Module
(NVIDIA H200 SXM 141 GB)

Дата выпуска

18 ноября 2024 г.
17 июля 2025 г.
(NVIDIA GeForce RTX 5070 Ti SUPER)

Дисплейные порты

No outputs
4x mini-DisplayPort 2.0
4x HDMI 2.1
(SPARKLE Arc A310 OmniView)

Арендовать дешевле, чем покупать