Performance Rating
AMD Radeon Instinct MI325X outperforms AMD Radeon Instinct MI300X by 6.27% in the overall GPU ARK performance rating
AMD Radeon Instinct MI325X
Expert Comparison
Видеокарта AMD Radeon Instinct MI325X лучше по памяти и энергопотреблению. Она имеет больше памяти (288 ГБ против 192 ГБ) и TDP составляет 1000 Вт против 750 Вт у MI300X, что делает её более эффективной для обработки больших объемов данных. Обе карты имеют одинаковые ядра, пропускную способность и индекс производительности, но MI325X имеет немного лучший GPI (100.0 против 94.1).
Contents:
Memory ML Performance Compute Power Architecture & Compatibility ML Software Support Clocks & Performance Power Consumption Rendering Benchmarks AdditionalMemory
Memory Size
+50%
288
ГБ
Memory Type
Memory Bandwidth
Memory Bus Width
ML Performance
FP16 (Half Precision)
BF16 (Brain Float)
TF32 (TensorFloat)
Compute Power
FP32 (Single Precision)
FP64 (Double Precision)
CUDA Cores
RT Cores
Architecture & Compatibility
GPU Architecture
SM (Streaming Multiprocessor)
PCIe Version
ML Software Support
CUDA Version
Clocks & Performance
Base Clock
Boost Clock
Memory Clock
Power Consumption
TDP/TGP
-25%
750 W
Recommended PSU
-18%
1150 W
Power Connector
Rendering
Texture Units (TMU)
ROP
L2 Cache
Benchmarks
MLPerf, llama2-70b-99.9 (Dummy)
MLPerf, llama2-70b-99.9 (UNSET)
MLPerf, llama2-70b-99.9 (fp16)
MLPerf, llama2-70b-99.9 (fp8)
+84%
1 946 tokens/s
MLPerf, llama3.1-405b (UNSET)
MLPerf, llama3.1-405b (fp16)
llama.cpp, llama-2-7b-Q4_0
+939%
232.9 tokens/s
MLPerf, mixtral-8x7b (fp8)
+17%
6 975 tokens/s
Additional
Slots
Release Date
Display Outputs
Renting is cheaper than buying
H100 80Gb SXM (80GB)
NVIDIA
Флагманская GPU на архитектуре Hopper с 80 ГБ памяти HBM3 в форм-факторе SXM. Создана для обучения и инференса больших языковых моделей, HPC задач. Поддерживает FP64, FP32, TF32, FP16, BF16, FP8 и INT8 вычисления с Tensor Cores 4-го поколения.
from 299.11 RUB/hour
