Что это
A100 — проверенный ускоритель Ampere с памятью 40 или 80 ГБ. Хорош для инференса моделей 7–34B, эмбеддингов, RAG и классического машинного обучения. Базовая единица российского парка.
Для каких задач подходит A100
- Обучение моделей с нуляПодходит
- Дообучение (LoRA, full fine-tune)Подходит
- Инференс LLMПодходит
- Генерация изображений и видеоПодходит
- RAG, поиск и эмбеддингиОптимально
- Компьютерное зрение и видеоаналитикаОптимально
- Рендер, 3D и инженерные расчётыНе рекомендуем
- ИгрыНе рекомендуем
Какие нейросети запустятся
Сколько карт A100 нужно для инференса популярных моделей. Расчёт по объёму памяти с запасом 25% на контекст; при большом числе пользователей памяти нужно больше.
| Модель | Память, 4 бита | A100, 4 бита | Память, 8 бит | A100, 8 бит |
|---|---|---|---|---|
| Qwen3.8 27B | ≈19 ГБ | 1 карта | ≈35 ГБ | 1 карта |
| Gemma 4 31B | ≈21 ГБ | 1 карта | ≈39 ГБ | 1 карта |
| Llama 3.3 70B | ≈48 ГБ | 1 карта | ≈88 ГБ | 2 карты |
| gpt-oss-120b (MoE) | ≈81 ГБ | 2 карты | выпущена в FP4 — см. 4 бита | |
| DeepSeek V4 Flash (MoE, 284B) | ≈200 ГБ | 4 карты | выпущена в FP4 — см. 4 бита | |
| GLM-5.3 (MoE, 744B) | ≈512 ГБ | 8 карт | ≈930 ГБ | нужен кластер |
| DeepSeek V4 Pro (MoE, 1,6T) | ≈1 081 ГБ | нужен кластер | выпущена в FP4 — см. 4 бита | |
Генерация изображений и видео на одной карте
- Stable Diffusion XLпомещается
- FLUX.2 [klein] 4Bпомещается
- FLUX.2 [dev] 32B, 4 битапомещается
- Wan 2.2 TI2V-5B, видео 720pпомещается
- FLUX.2 [klein] 9Bпомещается
- Wan 2.2 A14B, видеопомещается
Ориентир: FP8 ≈ 1 ГБ на 1 млрд параметров, 4 бита ≈ 0,55 ГБ, плюс 25% на контекст. gpt-oss и DeepSeek V4 выпущены сразу в 4-битном формате — считаем их родной размер. Число карт — 1, 2, 4 или 8, как их запускают в vLLM. Сколько видеопамяти нужно для нейросети · Калькулятор подбора
Кому подходит: масштаб бизнеса
Ориентиры, а не требования. Подскажем, имеет ли смысл A100 именно для вас.
Команда
продуктовая команда 3–20 человек, которой нужен свой инференс
Компания ориентир по обороту
компании с оборотом от 300 млн ₽, хостеры, интеграторы видеоаналитики
Бюджет
от нескольких миллионов рублей на сервер
Типовые сценарии
- Компания запускает RAG и эмбеддинги для поиска по базе знаний.
- Отдел аналитики считает классические ML-модели и прогнозы.
- Видеоаналитика на десятках камер с разделением GPU через MIG.
Что нужно для эксплуатации и обслуживания
Чтобы A100 работал стабильно, заранее проверьте питание, охлаждение и площадку. Поможем с каждым пунктом.
Питание
300 Вт (PCIe) или 400 Вт (SXM) на карту.
Охлаждение
Пассивный радиатор в PCIe-версии: только сервер с направленным обдувом.
Платформа и сеть
PCIe-сервер 4U на 4–8 карт или HGX A100.
Размещение
серверная или ЦОД. Карта с пассивным радиатором: нужен сервер с направленным потоком воздуха, в обычном корпусе ПК она перегреется.
Программы
драйверы Data Center, CUDA, контейнеры NGC, vLLM, Triton Inference Server, DeepStream для видеоаналитики.
Кто нужен в команде
системный администратор; для промышленного инференса — DevOps и ML-инженер.
Регламент обслуживания
- контроль температур и оборотов вентиляторов сервера
- чистка от пыли раз в квартал
- обновление драйверов и прошивки
- замена по гарантии продавца
Настроим и запустим
Сервер включается и сразу работает: проверка, система, драйверы, окружение и модель под вашу задачу.
- Стресс-тест под нагрузкой и отчёт к поставке
- Система, драйверы NVIDIA, CUDA или AMD ROCm
- Docker, Kubernetes или Slurm
- Мониторинг температур и ошибок памяти
- Модель под вашу задачу: vLLM, API и чат для сотрудников
Характеристики A100
Паспортные данные. Точную конфигурацию и версию фиксируем в КП.
Изображения на сайте иллюстративные: внешний вид, маркировка и комплектация зависят от производителя и партии и указываются в КП.
| Архитектура | Ampere |
|---|---|
| Память | 40 ГБ HBM2 или 80 ГБ HBM2e |
| Пропускная способность | 1,6–2 ТБ/с |
| Форматы | BF16, FP16, TF32, INT8 (без аппаратного FP8) |
| Разделение | MIG, до 7 изолированных инстансов |
| Мощность | 300 Вт (PCIe), 400 Вт (SXM) |
Сравнение с похожими моделями
| A100 | H100 | L40S | RTX PRO 6000 Blackwell | |
|---|---|---|---|---|
| Класс | Ускоритель SXM и PCIe · Ampere | Ускоритель SXM и PCIe · Hopper | Ускоритель PCIe · Ada Lovelace | Профессиональная · Blackwell |
| Память | 40 ГБ HBM2 или 80 ГБ HBM2e | 80 ГБ HBM3 | 48 ГБ GDDR6 ECC | 96 ГБ GDDR7 ECC |
| Пропускная способность | 1,6–2 ТБ/с | 3,35 ТБ/с (SXM), 2 ТБ/с (PCIe) | 864 ГБ/с | 1,79 ТБ/с |
| Мощность | 300–400 Вт | до 700 Вт | 350 Вт | 300–600 Вт |
| Лучше всего для | RAG, поиск и эмбеддинги, Компьютерное зрение и видеоаналитика | Дообучение (LoRA, full fine-tune), Инференс LLM | Инференс LLM, Генерация изображений и видео | Дообучение (LoRA, full fine-tune), Инференс LLM |
Сомневаетесь между покупкой и арендой? Купить или арендовать GPU: что выгоднее
Гарантия продавца
Гарантия продавца на каждую позицию, срок указываем в КП. Замена или ремонт — через нас, без пересылки к производителю.
Проверка перед отправкой
Стресс-тест под нагрузкой, диагностика DCGM, протокол испытаний к поставке.
Как проверяемВопросы о A100
Сколько стоит A100?
Цена зависит от количества, конфигурации и условий оплаты и меняется вместе с рынком. Пришлём КП с точной ценой и сроком поставки. Напишите в Telegram, на почту или оставьте заявку.
Какой срок поставки A100?
A100 поставляется под заказ. Срок подтверждаем у поставщика и указываем в КП; до подтверждения сроки не обещаем.
Для каких задач подходит A100?
Оптимально: rag, поиск и эмбеддинги, компьютерное зрение и видеоаналитика. Подробная таблица задач и моделей — на этой странице.
Что нужно для работы A100?
300 Вт (PCIe) или 400 Вт (SXM) на карту. Пассивный радиатор в PCIe-версии: только сервер с направленным обдувом. PCIe-сервер 4U на 4–8 карт или HGX A100.
Настроите A100 и запустите модель?
Да. Проверяем под нагрузкой, ставим систему, драйверы, CUDA или ROCm, Docker, разворачиваем модель под вашу задачу и отдаём API и чат для сотрудников.
Поддерживает ли A100 FP8?
Аппаратно нет. Модели запускают в BF16 или в 8- и 4-битной квантизации с вычислениями в FP16.
Работаете с юридическими лицами?
Да: договор, счёт с НДС, УПД, NDA по запросу. Реквизиты и карточку компании пришлём по запросу.