Что это
L4 — компактный энергоэффективный ускоритель на 72 Вт для инференса небольших моделей, видеоаналитики и транскодирования. Встаёт почти в любой сервер, включая 1U и edge-платформы.
Для каких задач подходит L4
- Обучение моделей с нуляНе рекомендуем
- Дообучение (LoRA, full fine-tune)Не рекомендуем
- Инференс LLMПодходит
- Генерация изображений и видеоПодходит
- RAG, поиск и эмбеддингиОптимально
- Компьютерное зрение и видеоаналитикаОптимально
- Рендер, 3D и инженерные расчётыНе рекомендуем
- ИгрыНе рекомендуем
Какие нейросети запустятся
Сколько карт L4 нужно для инференса популярных моделей. Расчёт по объёму памяти с запасом 25% на контекст; при большом числе пользователей памяти нужно больше.
| Модель | Память, 4 бита | L4, 4 бита | Память, 8 бит | L4, 8 бит |
|---|---|---|---|---|
| Qwen3.8 27B | ≈19 ГБ | 1 карта | ≈35 ГБ | 2 карты |
| Gemma 4 31B | ≈21 ГБ | 1 карта | ≈39 ГБ | 2 карты |
| Llama 3.3 70B | ≈48 ГБ | 4 карты | ≈88 ГБ | 4 карты |
| gpt-oss-120b (MoE) | ≈81 ГБ | 4 карты | выпущена в FP4 — см. 4 бита | |
| DeepSeek V4 Flash (MoE, 284B) | ≈200 ГБ | нужен кластер | выпущена в FP4 — см. 4 бита | |
| GLM-5.3 (MoE, 744B) | ≈512 ГБ | нужен кластер | ≈930 ГБ | нужен кластер |
| DeepSeek V4 Pro (MoE, 1,6T) | ≈1 081 ГБ | нужен кластер | выпущена в FP4 — см. 4 бита | |
Генерация изображений и видео на одной карте
- Stable Diffusion XLпомещается
- FLUX.2 [klein] 4Bпомещается
- FLUX.2 [dev] 32B, 4 битапомещается
- Wan 2.2 TI2V-5B, видео 720pпомещается
- FLUX.2 [klein] 9Bнужна выгрузка в RAM
- Wan 2.2 A14B, видеонужна выгрузка в RAM
Ориентир: FP8 ≈ 1 ГБ на 1 млрд параметров, 4 бита ≈ 0,55 ГБ, плюс 25% на контекст. gpt-oss и DeepSeek V4 выпущены сразу в 4-битном формате — считаем их родной размер. Число карт — 1, 2, 4 или 8, как их запускают в vLLM. Сколько видеопамяти нужно для нейросети · Калькулятор подбора
Кому подходит: масштаб бизнеса
Ориентиры, а не требования. Подскажем, имеет ли смысл L4 именно для вас.
Команда
продуктовая команда 3–20 человек, которой нужен свой инференс
Компания ориентир по обороту
компании с оборотом от 300 млн ₽, хостеры, интеграторы видеоаналитики
Бюджет
от нескольких миллионов рублей на сервер
Типовые сценарии
- Видеоаналитика на edge-серверах в магазинах и на производстве.
- Распознавание речи и эмбеддинги для поиска в небольшом сервисе.
Что нужно для эксплуатации и обслуживания
Чтобы L4 работал стабильно, заранее проверьте питание, охлаждение и площадку. Поможем с каждым пунктом.
Питание
72 Вт, питание от слота PCIe.
Охлаждение
Пассивный радиатор, нужен обдув сервера.
Платформа и сеть
Любой сервер с низкопрофильным слотом PCIe, в том числе 1U.
Размещение
любой сервер с низкопрофильным слотом и обдувом, включая edge-серверы и 1U-платформы.
Программы
драйверы Data Center, CUDA, Triton Inference Server, DeepStream, TensorRT.
Кто нужен в команде
системный администратор, ML-инженер для настройки моделей.
Регламент обслуживания
- контроль температуры
- чистка от пыли
- обновление драйверов
- замена по гарантии продавца
Настроим и запустим
Сервер включается и сразу работает: проверка, система, драйверы, окружение и модель под вашу задачу.
- Стресс-тест под нагрузкой и отчёт к поставке
- Система, драйверы NVIDIA, CUDA или AMD ROCm
- Docker, Kubernetes или Slurm
- Мониторинг температур и ошибок памяти
- Модель под вашу задачу: vLLM, API и чат для сотрудников
Характеристики L4
Паспортные данные. Точную конфигурацию и версию фиксируем в КП.
Изображения на сайте иллюстративные: внешний вид, маркировка и комплектация зависят от производителя и партии и указываются в КП.
| Архитектура | Ada Lovelace |
|---|---|
| Память | 24 ГБ GDDR6 |
| Пропускная способность | 300 ГБ/с |
| Форматы | FP8, FP16, INT8 |
| Интерфейс | PCIe 4.0 x16, один слот, низкий профиль |
| Мощность | 72 Вт, без доп. питания |
Сравнение с похожими моделями
| L4 | L40S | RTX 5060 Ti 16 ГБ | A100 | |
|---|---|---|---|---|
| Класс | Ускоритель PCIe · низкий профиль | Ускоритель PCIe · Ada Lovelace | GeForce · Blackwell | Ускоритель SXM и PCIe · Ampere |
| Память | 24 ГБ GDDR6 | 48 ГБ GDDR6 ECC | 16 ГБ GDDR7 | 40 ГБ HBM2 или 80 ГБ HBM2e |
| Пропускная способность | 300 ГБ/с | 864 ГБ/с | 448 ГБ/с | 1,6–2 ТБ/с |
| Мощность | 72 Вт | 350 Вт | 180 Вт | 300–400 Вт |
| Лучше всего для | RAG, поиск и эмбеддинги, Компьютерное зрение и видеоаналитика | Инференс LLM, Генерация изображений и видео | Игры | RAG, поиск и эмбеддинги, Компьютерное зрение и видеоаналитика |
Сомневаетесь между покупкой и арендой? Купить или арендовать GPU: что выгоднее
Гарантия продавца
Гарантия продавца на каждую позицию, срок указываем в КП. Замена или ремонт — через нас, без пересылки к производителю.
Проверка перед отправкой
Стресс-тест под нагрузкой, диагностика DCGM, протокол испытаний к поставке.
Как проверяемВопросы о L4
Сколько стоит L4?
Цена зависит от количества, конфигурации и условий оплаты и меняется вместе с рынком. Пришлём КП с точной ценой и сроком поставки. Напишите в Telegram, на почту или оставьте заявку.
Какой срок поставки L4?
L4 поставляется под заказ. Срок подтверждаем у поставщика и указываем в КП; до подтверждения сроки не обещаем.
Для каких задач подходит L4?
Оптимально: rag, поиск и эмбеддинги, компьютерное зрение и видеоаналитика. Подробная таблица задач и моделей — на этой странице.
Что нужно для работы L4?
72 Вт, питание от слота PCIe. Пассивный радиатор, нужен обдув сервера. Любой сервер с низкопрофильным слотом PCIe, в том числе 1U.
Настроите L4 и запустите модель?
Да. Проверяем под нагрузкой, ставим систему, драйверы, CUDA или ROCm, Docker, разворачиваем модель под вашу задачу и отдаём API и чат для сотрудников.
Сколько L4 можно поставить в сервер?
В зависимости от платформы — до 8 карт в 2U, без доработки питания.
Работаете с юридическими лицами?
Да: договор, счёт с НДС, УПД, NDA по запросу. Реквизиты и карточку компании пришлём по запросу.