Что это
Сервер на 8 ускорителей NVIDIA в форм-факторе HGX: GPU связаны NVLink и работают как одна машина. Конфигурацию собираем под задачу: H100 и H200 для дообучения и инференса, B200 и B300 для обучения больших моделей.
Для каких задач подходит Сервер HGX 8×GPU
- Обучение моделей с нуляОптимально
- Дообучение (LoRA, full fine-tune)Оптимально
- Инференс LLMОптимально
- Генерация изображений и видеоПодходит
- RAG, поиск и эмбеддингиОптимально
- Компьютерное зрение и видеоаналитикаПодходит
- Рендер, 3D и инженерные расчётыНе рекомендуем
- ИгрыНе рекомендуем
Какие нейросети запустятся
Сколько карт Сервер HGX 8×GPU нужно для инференса популярных моделей. Расчёт по объёму памяти с запасом 25% на контекст; при большом числе пользователей памяти нужно больше.
| Модель | Память, 4 бита | Сервер HGX 8×GPU, 4 бита | Память, 8 бит | Сервер HGX 8×GPU, 8 бит |
|---|---|---|---|---|
| Qwen3.8 27B | ≈19 ГБ | 1 карта | ≈35 ГБ | 1 карта |
| Gemma 4 31B | ≈21 ГБ | 1 карта | ≈39 ГБ | 1 карта |
| Llama 3.3 70B | ≈48 ГБ | 1 карта | ≈88 ГБ | 1 карта |
| gpt-oss-120b (MoE) | ≈81 ГБ | 1 карта | выпущена в FP4 — см. 4 бита | |
| DeepSeek V4 Flash (MoE, 284B) | ≈200 ГБ | 2 карты | выпущена в FP4 — см. 4 бита | |
| GLM-5.3 (MoE, 744B) | ≈512 ГБ | 4 карты | ≈930 ГБ | 8 карт |
| DeepSeek V4 Pro (MoE, 1,6T) | ≈1 081 ГБ | 8 карт | выпущена в FP4 — см. 4 бита | |
Генерация изображений и видео на одной карте
- Stable Diffusion XLпомещается
- FLUX.2 [klein] 4Bпомещается
- FLUX.2 [dev] 32B, 4 битапомещается
- Wan 2.2 TI2V-5B, видео 720pпомещается
- FLUX.2 [klein] 9Bпомещается
- Wan 2.2 A14B, видеопомещается
Ориентир: FP8 ≈ 1 ГБ на 1 млрд параметров, 4 бита ≈ 0,55 ГБ, плюс 25% на контекст. gpt-oss и DeepSeek V4 выпущены сразу в 4-битном формате — считаем их родной размер. Число карт — 1, 2, 4 или 8, как их запускают в vLLM. Сколько видеопамяти нужно для нейросети · Калькулятор подбора
Кому подходит: масштаб бизнеса
Ориентиры, а не требования. Подскажем, имеет ли смысл Сервер HGX 8×GPU именно для вас.
Команда
ИИ-отдел от 10 ML-инженеров или хостер, который сдаёт GPU в аренду
Компания ориентир по обороту
компании с оборотом от 1 млрд ₽, хостеры, интеграторы, исследовательские центры
Бюджет
от десятков миллионов рублей на сервер 8×GPU
Типовые сценарии
- Компания переносит обучение из облака на собственный сервер.
- Хостер собирает кластер из нескольких серверов под аренду.
Что нужно для эксплуатации и обслуживания
Чтобы Сервер HGX 8×GPU работал стабильно, заранее проверьте питание, охлаждение и площадку. Поможем с каждым пунктом.
Питание
10–15 кВт в зависимости от GPU; трёхфазное питание, стойка от 20 кВт.
Охлаждение
Воздушное (H100, H200, B200) или жидкостное (B300 в плотных стойках).
Платформа и сеть
Стойка 42–48U, PDU на 32 А, сеть с низкой задержкой для кластера.
Размещение
стойка в серверной или ЦОДе; поможем с колокейшном и подключением питания.
Программы
установка ОС (Ubuntu, Astra Linux, RED OS по запросу), драйверы, CUDA или ROCm, Docker, Kubernetes, vLLM — настраиваем перед отгрузкой.
Кто нужен в команде
системный инженер или DevOps; для кластера — команда эксплуатации.
Регламент обслуживания
- мониторинг через BMC/IPMI
- чистка фильтров и проверка вентиляторов
- обновление прошивок BIOS, BMC, GPU
- выезд и замена компонентов по договору
Настроим и запустим
Сервер включается и сразу работает: проверка, система, драйверы, окружение и модель под вашу задачу.
- Стресс-тест под нагрузкой и отчёт к поставке
- Система, драйверы NVIDIA, CUDA или AMD ROCm
- Docker, Kubernetes или Slurm
- Мониторинг температур и ошибок памяти
- Модель под вашу задачу: vLLM, API и чат для сотрудников
Характеристики Сервер HGX 8×GPU
Паспортные данные. Точную конфигурацию и версию фиксируем в КП.
Изображения на сайте иллюстративные: внешний вид, маркировка и комплектация зависят от производителя и партии и указываются в КП.
| Ускорители | 8 × H100, H200, B200 или B300 на плате HGX |
|---|---|
| Процессоры | 2 × Intel Xeon или AMD EPYC последних поколений |
| Оперативная память | 1–4 ТБ DDR5 RDIMM |
| Накопители | NVMe U.2/E1.S, от 8 до 30+ ТБ |
| Сеть | 8 × 400G или 800G (InfiniBand/Ethernet) + 2 × 100–200G |
| Высота | 6–10U |
| Питание | 10–15 кВт, блоки 3 кВт с резервированием |
Сравнение с похожими моделями
| Сервер HGX 8×GPU | Сервер 8×PCIe | Станция 2–4 GPU | H200 | |
|---|---|---|---|---|
| Класс | Сервер · 8 ускорителей SXM | Сервер · 8 карт PCIe | Рабочая станция · 2–4 GPU | Ускоритель SXM и PCIe · Hopper |
| Память | до 4 ТБ DDR5 | до 2 ТБ DDR5 | — | 141 ГБ HBM3e |
| Пропускная способность | — | — | — | 4,8 ТБ/с |
| Мощность | 10–15 кВт | 4–8 кВт | 220 В | до 700 Вт |
| Лучше всего для | Обучение моделей с нуля, Дообучение (LoRA, full fine-tune) | Дообучение (LoRA, full fine-tune), Инференс LLM | Дообучение (LoRA, full fine-tune), Инференс LLM | Дообучение (LoRA, full fine-tune), Инференс LLM |
Сомневаетесь между покупкой и арендой? Купить или арендовать GPU: что выгоднее
Гарантия продавца
Гарантия продавца на каждую позицию, срок указываем в КП. Замена или ремонт — через нас, без пересылки к производителю.
Проверка перед отправкой
Стресс-тест под нагрузкой, диагностика DCGM, протокол испытаний к поставке.
Как проверяемВопросы о Сервер HGX 8×GPU
Сколько стоит Сервер HGX 8×GPU?
Цена зависит от количества, конфигурации и условий оплаты и меняется вместе с рынком. Пришлём КП с точной ценой и сроком поставки. Напишите в Telegram, на почту или оставьте заявку.
Какой срок поставки Сервер HGX 8×GPU?
Сервер HGX 8×GPU поставляется под заказ. Срок подтверждаем у поставщика и указываем в КП; до подтверждения сроки не обещаем.
Для каких задач подходит Сервер HGX 8×GPU?
Оптимально: обучение моделей с нуля, дообучение (lora, full fine-tune), инференс llm, rag, поиск и эмбеддинги. Подробная таблица задач и моделей — на этой странице.
Что нужно для работы Сервер HGX 8×GPU?
10–15 кВт в зависимости от GPU; трёхфазное питание, стойка от 20 кВт. Воздушное (H100, H200, B200) или жидкостное (B300 в плотных стойках). Стойка 42–48U, PDU на 32 А, сеть с низкой задержкой для кластера.
Настроите Сервер HGX 8×GPU и запустите модель?
Да. Проверяем под нагрузкой, ставим систему, драйверы, CUDA или ROCm, Docker, разворачиваем модель под вашу задачу и отдаём API и чат для сотрудников.
Вы ставите ОС и ПО?
Да: устанавливаем ОС, драйверы, CUDA, контейнерную среду и проверяем сервер под нагрузкой перед отгрузкой.
Можно собрать кластер из нескольких серверов?
Да, подбираем сеть InfiniBand или Ethernet, коммутаторы и хранилище под кластер.
Работаете с юридическими лицами?
Да: договор, счёт с НДС, УПД, NDA по запросу. Реквизиты и карточку компании пришлём по запросу.