Что это
MI300X — проверенный ускоритель AMD с 192 ГБ HBM3. Больше памяти, чем у H100, при меньшем энергопотреблении, чем у новых поколений. Разумный вариант для инференса больших моделей, когда важна цена за гигабайт памяти.
Для каких задач подходит MI300X
- Обучение моделей с нуляПодходит
- Дообучение (LoRA, full fine-tune)Оптимально
- Инференс LLMОптимально
- Генерация изображений и видеоПодходит
- RAG, поиск и эмбеддингиОптимально
- Компьютерное зрение и видеоаналитикаПодходит
- Рендер, 3D и инженерные расчётыНе рекомендуем
- ИгрыНе рекомендуем
Какие нейросети запустятся
Сколько карт MI300X нужно для инференса популярных моделей. Расчёт по объёму памяти с запасом 25% на контекст; при большом числе пользователей памяти нужно больше.
| Модель | Память, 4 бита | MI300X, 4 бита | Память, 8 бит | MI300X, 8 бит |
|---|---|---|---|---|
| Qwen3.8 27B | ≈19 ГБ | 8 карт | ≈35 ГБ | 8 карт |
| Gemma 4 31B | ≈21 ГБ | 8 карт | ≈39 ГБ | 8 карт |
| Llama 3.3 70B | ≈48 ГБ | 8 карт | ≈88 ГБ | 8 карт |
| gpt-oss-120b (MoE) | ≈81 ГБ | 8 карт | выпущена в FP4 — см. 4 бита | |
| DeepSeek V4 Flash (MoE, 284B) | ≈200 ГБ | 8 карт | выпущена в FP4 — см. 4 бита | |
| GLM-5.3 (MoE, 744B) | ≈512 ГБ | 8 карт | ≈930 ГБ | 8 карт |
| DeepSeek V4 Pro (MoE, 1,6T) | ≈1 081 ГБ | 8 карт | выпущена в FP4 — см. 4 бита | |
Генерация изображений и видео на одной карте
- Stable Diffusion XLпомещается
- FLUX.2 [klein] 4Bпомещается
- FLUX.2 [dev] 32B, 4 битапомещается
- Wan 2.2 TI2V-5B, видео 720pпомещается
- FLUX.2 [klein] 9Bпомещается
- Wan 2.2 A14B, видеопомещается
Ориентир: FP8 ≈ 1 ГБ на 1 млрд параметров, 4 бита ≈ 0,55 ГБ, плюс 25% на контекст. gpt-oss и DeepSeek V4 выпущены сразу в 4-битном формате — считаем их родной размер. Число карт — 1, 2, 4 или 8, как их запускают в vLLM. Сколько видеопамяти нужно для нейросети · Калькулятор подбора
Кому подходит: масштаб бизнеса
Ориентиры, а не требования. Подскажем, имеет ли смысл MI300X именно для вас.
Команда
ИИ-отдел от 10 ML-инженеров или хостер, который сдаёт GPU в аренду
Компания ориентир по обороту
компании с оборотом от 1 млрд ₽, хостеры, интеграторы, исследовательские центры
Бюджет
от десятков миллионов рублей на сервер 8×GPU
Типовые сценарии
- Интегратор собирает инференс-кластер для модели 70B с большим числом пользователей.
- Исследовательская группа дообучает модели на открытом стеке ROCm.
Что нужно для эксплуатации и обслуживания
Чтобы MI300X работал стабильно, заранее проверьте питание, охлаждение и площадку. Поможем с каждым пунктом.
Питание
До 750 Вт на ускоритель, сервер 8×MI300X — порядка 10 кВт.
Охлаждение
Воздушное охлаждение в сервере 8U.
Платформа и сеть
Сервер на платформе AMD Instinct 8×OAM, 2 CPU EPYC, DDR5, сеть 400G.
Размещение
ЦОД со стойками высокой плотности; версии с жидкостным охлаждением требуют контура охлаждения.
Программы
AMD ROCm, PyTorch, vLLM, SGLang, Triton; Kubernetes или Slurm; мониторинг AMD SMI.
Кто нужен в команде
DevOps/системный инженер и ML-инженер с опытом ROCm.
Регламент обслуживания
- мониторинг температур и ошибок памяти
- обслуживание системы охлаждения
- обновление ROCm и прошивок
- замена модуля по гарантии продавца
Настроим и запустим
Сервер включается и сразу работает: проверка, система, драйверы, окружение и модель под вашу задачу.
- Стресс-тест под нагрузкой и отчёт к поставке
- Система, драйверы NVIDIA, CUDA или AMD ROCm
- Docker, Kubernetes или Slurm
- Мониторинг температур и ошибок памяти
- Модель под вашу задачу: vLLM, API и чат для сотрудников
Характеристики MI300X
Паспортные данные. Точную конфигурацию и версию фиксируем в КП.
Изображения на сайте иллюстративные: внешний вид, маркировка и комплектация зависят от производителя и партии и указываются в КП.
| Архитектура | CDNA 3 |
|---|---|
| Память | 192 ГБ HBM3 |
| Пропускная способность | 5,3 ТБ/с |
| Межсоединение | Infinity Fabric между 8 ускорителями |
| Мощность | до 750 Вт |
| Программы | ROCm, PyTorch, vLLM |
Сравнение с похожими моделями
| MI300X | MI325X | H100 | H200 | |
|---|---|---|---|---|
| Класс | Ускоритель OAM · CDNA 3 | Ускоритель OAM · CDNA 3 | Ускоритель SXM и PCIe · Hopper | Ускоритель SXM и PCIe · Hopper |
| Память | 192 ГБ HBM3 | 256 ГБ HBM3e | 80 ГБ HBM3 | 141 ГБ HBM3e |
| Пропускная способность | 5,3 ТБ/с | 6 ТБ/с | 3,35 ТБ/с (SXM), 2 ТБ/с (PCIe) | 4,8 ТБ/с |
| Мощность | до 750 Вт | до 1000 Вт | до 700 Вт | до 700 Вт |
| Лучше всего для | Дообучение (LoRA, full fine-tune), Инференс LLM | Дообучение (LoRA, full fine-tune), Инференс LLM | Дообучение (LoRA, full fine-tune), Инференс LLM | Дообучение (LoRA, full fine-tune), Инференс LLM |
Сомневаетесь между покупкой и арендой? Купить или арендовать GPU: что выгоднее
Гарантия продавца
Гарантия продавца на каждую позицию, срок указываем в КП. Замена или ремонт — через нас, без пересылки к производителю.
Проверка перед отправкой
Стресс-тест под нагрузкой, диагностика AMD SMI и ROCm Validation Suite, протокол испытаний к поставке.
Как проверяемВопросы о MI300X
Сколько стоит MI300X?
Цена зависит от количества, конфигурации и условий оплаты и меняется вместе с рынком. Пришлём КП с точной ценой и сроком поставки. Напишите в Telegram, на почту или оставьте заявку.
Какой срок поставки MI300X?
MI300X поставляется под заказ. Срок подтверждаем у поставщика и указываем в КП; до подтверждения сроки не обещаем.
Для каких задач подходит MI300X?
Оптимально: дообучение (lora, full fine-tune), инференс llm, rag, поиск и эмбеддинги. Подробная таблица задач и моделей — на этой странице.
Что нужно для работы MI300X?
До 750 Вт на ускоритель, сервер 8×MI300X — порядка 10 кВт. Воздушное охлаждение в сервере 8U. Сервер на платформе AMD Instinct 8×OAM, 2 CPU EPYC, DDR5, сеть 400G.
Настроите MI300X и запустите модель?
Да. Проверяем под нагрузкой, ставим систему, драйверы, CUDA или ROCm, Docker, разворачиваем модель под вашу задачу и отдаём API и чат для сотрудников.
MI300X или H100?
У MI300X 192 ГБ памяти против 80 ГБ у H100, поэтому большие модели помещаются на меньшем числе ускорителей. H100 выигрывает зрелостью экосистемы CUDA.
Работаете с юридическими лицами?
Да: договор, счёт с НДС, УПД, NDA по запросу. Реквизиты и карточку компании пришлём по запросу.