Как уместить 6 видеокарт в стоечном корпусе

<100 прочитали  •  2,5 мин.

HYPERPC

размещено на Промо​​​​​​​Страницах

Шесть флагманских видеокарт RTX 5090 в одном стоечном 4U-корпусе. На воздушном охлаждении такое не разместить — карта занимает три-четыре слота, в 4U помещается две-три. Дальше — про жидкостное охлаждение, которое решило задачу.

Что было до: задача физического размещения

Клиент — ООО «ЛАНГАРДЕН ПРОЕКТЫ», работают с задачами высокопроизводительных вычислений. Запрос звучал коротко: сервер на шести флагманских видеокартах RTX 5090 в стоечном корпусе высотой 4U.

На воздушном охлаждении такая задача физически не решается. Каждая видеокарта в штатном исполнении занимает три-четыре слота PCIe — это толщина радиатора. В стоечном 4U-корпусе высота позволяет разместить максимум две-три такие карты в ряд. Для шести нужен другой подход — он лёг в основу конфигурации HYPERPC AMPERE под этот проект.

Сервер на шести видеокартах RTX 5090 в стоечном 4U-корпусе. Реализованная компоновка — результат перехода на индивидуальное жидкостное охлаждение.

Индивидуальные водоблоки: 4-слотовая карта в 1-слотовом исполнении

Решение — снять с каждой видеокарты штатное воздушное охлаждение и установить водоблок полного покрытия. Это даёт физическое преобразование: карта из трёх-четырёх PCIe-слотов превращается в одно слотовое исполнение.

Видеокарты RTX 5090 с отдельными водоблоками полного покрытия. После замены охлаждения каждая карта занимает одно слотовое место.

В системе установлены шесть NVIDIA GeForce RTX 5090. У каждой по 32 ГБ видеопамяти — суммарно 192 ГБ на параллельные вычислительные процессы. После перехода на жидкостное охлаждение шесть видеокарт встают в один ряд на материнской плате без зазоров и без перегрева.

Полнопокровный водоблок снимает тепло со всей поверхности видеокарты — графический процессор, модули памяти, силовая часть.

Threadripper PRO 7995WX — 128 линий PCIe под шесть видеокарт

Шесть видеокарт на полной шине требуют процессора с большим запасом по PCIe-линиям. Если линий не хватает — шина для каждой карты сужается, и значительная часть производительности теряется на ожидание данных.

В системе установлен AMD Threadripper PRO 7995WX — 96 ядер, 192 потока, 128 линий PCIe 5.0. 128 линий обеспечивают полную шину каждой из шести видеокарт без сужения. Многоканальная серверная оперативная память DDR5 ECC обеспечивает непрерывную подачу данных к процессору.

AMD Threadripper PRO 7995WX. 96 ядер и 128 линий PCIe 5.0 обеспечивают шину для шести видеокарт без сужения.

Единый жидкостной контур на шесть видеокарт и процессор

Все шесть водоблоков видеокарт и водоблок процессора подключены к единому жидкостному контуру. Это даёт две вещи. Во-первых, тепло снимается с гарантированной скоростью со всех нагревающихся компонентов независимо от их расположения в корпусе. Во-вторых, обслуживание упрощается — система состоит из одного контура, а не из семи независимых.

Единый жидкостной контур охватывает шесть водоблоков видеокарт и водоблок процессора.

Отсутствие теплового сброса под полной нагрузкой было одним из ключевых требований проекта. Когда все шесть видеокарт работают на 100% мощности, контур поддерживает рабочие температуры в допустимом диапазоне, и видеокарты держат частоты без снижения.

Жидкостный контур и видеокарты в 4U-корпусе. Маршруты трубок и точки подключения спроектированы под плотную компоновку.

Питание 4100 Вт от двух блоков

Шесть видеокарт RTX 5090 под полной нагрузкой плюс 96-ядерный процессор требуют существенной электрической мощности. В системе установлены два блока питания общей мощностью 4100 Вт. Двойная схема даёт стабильность при пиковых скачках нагрузки на видеокарты — кратковременные броски потребления не приводят к просадке напряжения.

Два блока питания общей мощностью 4100 Вт. Размещены в стоечном корпусе с сохранением воздушных коридоров.

Индивидуальный водоблок превращает 4-слотовую видеокарту в 1-слотовый модуль — это и есть способ разместить шесть таких карт в одном 4U-корпусе.

Кому подходит такая конфигурация

Сервер на шести флагманских видеокартах в 4U-корпусе работает под:

• задачи высокопроизводительных вычислений, где требуется большая совокупная видеопамять — 192 ГБ под параллельные процессы;
• обучение и прогон нейросетей в командах разработки и научных исследованиях;
• рендер-фермы под трёхмерную графику с длинными циклами рендеринга;
• научно-исследовательские задачи моделирования, где нагрузка хорошо параллелится на несколько видеокарт.

Финальная компоновка перед отправкой клиенту. Сервер работает в режиме круглосуточной нагрузки на стороне заказчика.

HYPERPC AMPERE производится под задачу клиента. Количество видеокарт, объём оперативной памяти, конфигурация жидкостного контура, формат корпуса — каждый параметр определяется по запросу.

Что делать, если у вас похожая задача

Если ваша задача требует размещения нескольких флагманских видеокарт в плотной стоечной компоновке и упирается в физические ограничения воздушного охлаждения — есть смысл начать с разговора.

Пришлите профиль задачи: какие видеокарты, какие нагрузки, требуемый формат корпуса, ограничения по площадке. Инженер HYPERPC посчитает конфигурацию HYPERPC AMPERE под вашу задачу и срок развёртывания.

💬 Свяжитесь с нами:

📱 Telegram → t.me/hyperpc_ru_bot

📱 WhatsApp → wa.me/79255388341

📱 VK → vk.com

📱 MAX → max.ru

📧 Почта → sales@hyperpc.ru, server@hyperpc.ru

Листая дальше, вы попадёте на сайт HYPERPC — смотрите конфигурации серверов, оставляйте заявку на нестандартную конфигурацию. Проектируем то, чего нет в каталоге — просто опишите задачу.