NVIDIA и Amazon представили NVIDIA GH200 NVL32 и Project Ceiba
Компания NVIDIA совместно с облачным провайдером Amazon Web Services (AWS) представила новые решения в области искусственного интеллекта. Основными новинками стали системы NVIDIA GH200 NVL32 и Project Ceiba.
NVIDIA GH200 NVL32 представляет собой готовую систему, выполненную в формате стандартной серверной стойки. Она объединяет 32 гибридных ускорителя NVIDIA GH200 Grace Hopper Superchip, которые представляют собой двухчиповую систему из центрального процессора с 72 ядрами Arm Neoverse и графического процессора NVIDIA H100. Такая стойка сможет обеспечить выдающуюся производительность — до 128 Пфлопс в операциях FP8 (квадриллионов операций в секунду).
Система обладает 2304 процессорными Arm-ядрами, 20 Тбайт оперативной памяти, включая 4,5 Тбайт HBM3e с общей пропускной способностью 157 Тбайт/с. За связь между суперчипами GH200 отвечают девять коммутаторов NVSwitch и интерфейс NVLink с общей пропускной способностью 57,6 Тбайт/с. Применяется система жидкостного охлаждения. AWS первой предложит системы GH200 NVL32 в составе облачной платформы NVIDIA DGX Cloud. Более того, Amazon даст возможность клиентам объединять новые системы NVIDIA в кластеры EC2 UltraClasters, получая в свое распоряжение тысячи ускорителей GH200 Superchip. По словам самой NVIDIA, системы GH200 NVL32 идеально подходят как для обучения, так и для запуска крупных нейросетей — даже с 1 трлн параметров.
Кроме этого, NVIDIA и AWS анонсировали Project Ceiba — самый быстрый в мире суперкомпьютер для искусственного интеллекта на базе GPU. Система обеспечит производительность 65 Эксафлопс и объединит в себе 16 384 ускорителя GH200, а также 9,1 Пбайт памяти и обеспечит общую пропускную способность интерконнекта на уровне 410 Тбайт/с.. Суперкомпьютер будет доступен клиентам AWS в следующем году через облачную платформу AWS DGX Cloud.
