AMD Radeon RX Vega M GL vs NVIDIA H200 SXM 141 GB

Сравнение AMD Radeon RX Vega M GL с 4 Гб HBM2 и 1 280 ядрами против NVIDIA H200 SXM 141 GB с 141 Гб HBM3e и 16 896 ядрами.

Загружаемся...

Оценка производительности

A100 A100
H200 H200
MI325X MI325X

AMD Radeon RX Vega M GL

AMD Radeon RX Vega M GL

RX 7900 XTX RX 7900 XTX
MI250 MI250
Instinct MI300X Instinct MI300X

NVIDIA H200 SXM 141 GB

67,4

NVIDIA H200 SXM 141 GB

67,4

Содержание:

Память ML-производительность Вычислительная мощность Архитектура и совместимость Программная поддержка ML Частоты и производительность Энергопотребление Рендеринг Бенчмарки Дополнительно

Память

Объем памяти

4 GB
🔥 +3 425% 141 ГБ

Тип памяти

HBM2 HBM3e

Пропускная способность памяти

179.2 GB/s
🔥 4.89 TB/s

Ширина шины памяти

1 024 бит 6 144 бит

ML-производительность

FP16 (half)

2,588 TFLOPS
🔥 +10 240% 267,6 TFLOPS

BF16

Нет Нет

TF32

Нет Нет

Вычислительная мощность

FP32 (float)

2,588 TFLOPS
🔥 +2 485% 66,91 TFLOPS

FP64 (double)

0,16 TFLOPS
🔥 +20 806% 33,45 TFLOPS

CUDA ядра

1 280
🔥 +1 220% 16 896

RT ядра

Нет Нет

Архитектура и совместимость

Архитектура GPU

GCN 4.0 Hopper

SM (Streaming Multiprocessor)

Нет
🔥 132

PCIe версия

IGP PCIe 5.0 x16

Программная поддержка ML

CUDA версия

Нет 9.0

Частоты и производительность

Base Clock

931
🔥 +61% 1 500

Boost Clock

1 011
🔥 +96% 1 980

Memory Clock

700
🔥 +128% 1 593

Энергопотребление

TDP/TGP

🔥 -91% 65 W
700 W

Рекомендуемый БП

Нет 1100 W

Разъём питания

Нет 8-pin EPS

Рендеринг

Текстурные блоки (TMU)

80
🔥 +560% 528

ROP

Нет Нет

L2 Cache

1024 KB
🔥 50 MB

Бенчмарки

MLPerf, llama2-70b-99.9 (UNSET)

3 534 tokens/s

MLPerf, llama2-70b-99.9 (fp16)

3 553 tokens/s

MLPerf, llama2-70b-99.9 (fp8)

2 444 tokens/s

MLPerf, llama3.1-405b (fp16)

40.8 tokens/s

MLPerf, llama3.1-405b (fp8)

25.3 tokens/s

MLPerf, llama3.1-8b (fp8)

5 161 tokens/s

MLPerf, deepseek-r1 (fp8)

1 113 tokens/s

MLPerf, mixtral-8x7b (fp8)

7 132 tokens/s

Дополнительно

Слоты

IGP
🔥 SXM Module

Дата выпуска

1 февраля 2018 г. 18 ноября 2024 г.

Дисплейные порты

Portable Device Dependent
No outputs

Арендовать дешевле, чем покупать