GPU-сервер нельзя оценивать только по числу ускорителей. Высокая вычислительная плотность переносит ограничения на стойку: электропитание, отвод тепла, массу, сетевую фабрику и удобство обслуживания.
Соберите паспорт площадки
- Свободные юниты и полезная глубина шкафа
- Допустимая статическая и выдвижная нагрузка на рельсы
- Лимит мощности стойки и каждого ответвления
- Доступный холодный воздух и предельная тепловая нагрузка
- Тип PDU, розеток и силовых кабелей
- Свободные порты фабрики и магистральная пропускная способность
Проверяйте не среднюю мощность текущей стойки, а остаточный бюджет в худшем согласованном режиме. Ускорители могут долго работать близко к установленному лимиту, а соседнее оборудование продолжит выделять тепло.
Проверьте воздушный контур
Уточните направление потока всех устанавливаемых систем и сетевого оборудования. Заглушки в свободных юнитах, герметизация кабельных проходов и разделение горячего и холодного коридоров влияют на рециркуляцию. Высокая температура на входе может появиться даже при достаточной общей мощности охлаждения зала.
| Симптом | Вероятная причина | Что измерить |
|---|---|---|
| Температура растет на верхних узлах | Рециркуляция горячего воздуха | Температуру на входе по высоте стойки |
| Вентиляторы постоянно на максимуме | Недостаточный поток или неверный профиль | Перепад температур и события BMC |
| Ограничение частот GPU | Мощность или температура | Телеметрию ускорителя, PSU и входного воздуха |
| Нестабильность под общей нагрузкой | Перегрузка ветви питания | Ток каждой PDU и событие защиты |
Сеть должна кормить ускорители данными
Для распределенных вычислений важны не только номинальные гигабиты, но и топология, задержка, oversubscription, число портов на узел и путь к хранилищу. Отдельно спланируйте сеть управления, сервисный доступ и передачу наборов данных. Кабели и трансиверы внесите в ведомость до монтажа.
Спланируйте безопасное обслуживание
Тяжелый корпус может требовать двух специалистов или подъемного устройства. Проверьте, можно ли выдвинуть сервер без отключения соседних кабелей, где будет храниться упаковка и как выполняется замена ускорителя или блока питания. В регламент добавьте время охлаждения компонентов и защиту от электростатического разряда.
Приемочный тест после установки
- Проверить состав и версии микропрограмм
- Создать одновременную нагрузку CPU, памяти, GPU и сети
- Записать мощность по каждому вводу
- Проверить температуру на входе и телеметрию компонентов
- Проверить отказ одного пути питания
- Измерить передачу данных к целевому хранилищу
- Сохранить базовую телеметрию для будущего сравнения
Коротко о главном
Частые вопросы
Можно ли оценить питание GPU-сервера по TDP ускорителей?
Нет. Нужно учитывать CPU, память, накопители, вентиляторы, адаптеры, потери блоков питания и режим максимальной конфигурации.
Почему важна масса сервера?
Высокоплотные системы могут быть тяжелыми; шкаф, рельсы, фальшпол и процедура обслуживания должны выдерживать их безопасно.
Достаточно ли сети 100 Гбит/с?
Номинальная скорость порта не отвечает на вопрос. Нужны данные о топологии, профиле обмена, числе узлов, oversubscription и производительности хранилища.