Blackwell, 32 ГБ GDDR7

NVIDIA RTX PRO 4500 Blackwell

32 ГБ GDDR7 и Tensor Core пятого поколения с поддержкой FP4 при энергопакете 165–200 Вт. Карта на архитектуре Blackwell для инференса, видео и генерации изображений.

Спецификации

Характеристики Blackwell

Архитектура
NVIDIA Blackwell
Видеопамять
32 GB GDDR7 (ECC)
Пропускная способность
800–896 GB/s
FP4 Tensor Core (с разреженностью)
1.6 PFLOPS
FP32
51 TFLOPS
Потребление (TDP)
165–200W
Сравнение

Новое поколение против объёма

Карта для сравнения — L40S на Ada Lovelace. Она быстрее в FP32 (91.6 против 51 TFLOPS) и в FP8 на Tensor Core (1466 против 811 TFLOPS, оба значения с разреженностью), и памяти у неё больше — 48 ГБ. У PRO 4500 есть FP4, которого у Ada нет, и энергопакет 165–200 Вт против 350. У карты две версии, Server Edition и Workstation Edition: пропускная способность и энергопакет у них различаются, поэтому в характеристиках указаны диапазоны.

Пропускная способность (GDDR7) 800–896 GB/s
800 ГБ/с у Server Edition, 896 ГБ/с у Workstation Edition; шина 256 бит
Энергопакет 165–200 W
165 Вт у однослотовой Server Edition, 200 Вт у Workstation Edition; у L40S — 350 Вт

RTX PRO 4500 vs L40S

ПараметрPRO 4500L40S
Видеопамять32 GB GDDR748 GB GDDR6
Пропускная способность800–896 GB/s864 GB/s
FP8 Tensor, с разреженностью811 TFLOPS1466 TFLOPS
FP4 Tensor, с разреженностью1.6 PFLOPSНет
Потребление (TDP)165–200 W350 W
Возможности

Ключевые особенности

FP4 на Tensor Core пятого поколения

Формат вдвое компактнее FP8: веса занимают меньше памяти, а пиковая производительность Tensor-ядер — 1.6 PFLOPS с разреженностью.

MIG на два инстанса

Server Edition делится на два изолированных GPU по 16 ГБ — у каждого своя память, кэш и вычислительные ядра.

NVENC девятого поколения

Три энкодера и три декодера у Server Edition, по два у Workstation Edition, с поддержкой 4:2:2 — монтаж, транскод и видеоаналитика идут без нагрузки на процессор.

Решения

Для каких задач

Инференс в FP4 и FP8

Модель на 30B параметров в четырёхбитной квантизации помещается с запасом под контекст, 8B — в FP16.

Видео и стриминг

Аппаратный 4:2:2 в энкодере и декодере: транскод, real-time обработка потоков, подготовка датасетов.

Генерация изображений

SDXL помещается в 32 ГБ в FP16 целиком, FLUX.1 — в FP8 с запасом под ControlNet и апскейл.

Попробовать Blackwell?

Арендуйте RTX PRO 4500 поминутно: драйверы и CUDA уже установлены, сервер поднимается за несколько минут.