Модуль ускорения ИИ Ascend Atlas 300I Pro

Модуль ускорения ИИ Ascend Atlas 300I Pro — это карта PCIe для инференса: она запускает уже обученные нейросети в серверах и рабочих станциях. Она подойдёт интеграторам систем ИИ, вузовским лабораториям и командам, которые строят распознавание изображений, OCR и поиск по контенту. На плате стоит один процессор серии Ascend 310 с 8 ядрами Da Vinci и 8 собственными CPU-ядрами, 24 ГБ памяти и блоки кодирования и декодирования видео. Формат половинной высоты и длины позволяет уместить карту в компактный сервер.

140 TOPS в INT8 при 72 Вт

Карта выдаёт до 140 TOPS в INT8 и 70 TFLOPS в FP16 при потреблении 72 Вт, а Huawei заявляет эффективность около 2 TOPS/Вт.

Это пиковые значения: реальная скорость зависит от модели, квантования и версии программного стека. Зато низкое энергопотребление означает, что в один сервер можно поставить несколько карт без перестройки питания и охлаждения. Мощный игровой ускоритель для той же задачи потребляет в разы больше. Для круглосуточного инференса разница видна и в счетах за электричество, и в нагреве стойки.

24 ГБ LPDDR4X с ECC вмещают несколько моделей

Память LPDDR4X объёмом 24 ГБ с пропускной способностью 204,8 ГБ/с и поддержкой ECC позволяет держать в карте несколько моделей одновременно.

В типичном конвейере работают детектор, классификатор и модель извлечения признаков, и каждой нужно место. ECC исправляет случайные битовые ошибки, которые накапливаются при долгой непрерывной работе. Платой за такой объём по доступной цене становится скорость: HBM в дорогих ускорителях заметно быстрее. Для задач, где важны число потоков и цена одного канала, этот размен обычно оправдан.

Один процессор делится на 7 виртуальных NPU

Один процессор Ascend 310 можно разделить максимум на 7 виртуальных NPU, и разные задачи не будут мешать друг другу.

Память и кодеки при этом делятся пропорционально. Так одна карта обслуживает сразу несколько проектов или учебных групп. Для интегратора это способ разнести клиентов по изолированным слотам, для лаборатории — выдать каждому студенту свою долю вычислений.

Сценарии: умный кампус и учебная лаборатория

Карта решает две типичные задачи: анализ изображений и видео в здании и практикум по ИИ в образовательном проекте.

Первый сценарий: интегратор оснащает школу или университет. Карта разбирает снимки и потоки с камер, распознаёт объекты и текст, а данные остаются на месте и не уходят во внешнее облако. Второй сценарий: лаборатория ИИ. Студенты разворачивают настоящий инференс-контур, запускают модели через фреймворки PyTorch и TensorFlow и смотрят, как загрузка меняется от настроек. Такой стенд хорошо дополняет VR/AR-классы: карта может обрабатывать видео и распознавать окружение для интерактивных проектов.

Ограничения при переходе с CUDA

Карта работает с программным стеком CANN, а не с CUDA, поэтому код под NVIDIA придётся адаптировать.

Она рассчитана на инференс, а не на обучение больших моделей. Вентилятора на плате нет: охлаждение зависит от воздушного потока в корпусе сервера. Перед покупкой сверьте слот PCIe, размер кронштейна, версию драйверов и совместимость сервера с картой.

Технические характеристики Atlas 300I Pro

В таблице собраны основные параметры карты по документации Huawei.

ПараметрЗначение
Форм-факторPCIe, половинная высота и длина; кронштейны полной и половинной высоты
Процессор1 × серия Ascend 310: 8 ядер Da Vinci AI, 8 CPU-ядер до 1,9 ГГц
Производительность140 TOPS INT8; 70 TFLOPS FP16
Память24 ГБ LPDDR4X, 204,8 ГБ/с, ECC
Видео и изображенияH.264, H.265, JPEG (кодирование и декодирование)
ИнтерфейсPCIe 4.0 x16, совместим с x8/x4/x2
Потребляемая мощность72 Вт
Размеры (Д × В × Ш)169,5 × 68,9 × 18,45 мм
Вес280 г
Виртуализациядо 7 виртуальных NPU

Интерфейсы PCIe x 16 Gen4.0
CPU Ascend 310: 8 ядер
Форм-фактор PCIe-карта половинной высоты и длины
Системная память LPDDR4X 24 ГБ
Производительность 140 TOPS INT8, 70 TFLOPS FP16
Рабочая температура от 5℃ до 55 ℃
Модель Ascend Atlas 300I Pro
Габаритные размеры (В*Ш*Г) 169.5 х 68.9 мм х 18.45 мм
Питание 72 Вт

Написать отзыв

Внимание: HTML не поддерживается! Используйте обычный текст!
    Плохо      Хорошо

В карте есть аппаратный кодек. Он декодирует и кодирует H.264 и H.265 и работает с JPEG. По данным продавцов, карта декодирует до 24 потоков HD. Итоговое число каналов зависит от разрешения, частоты кадров и сложности модели, которая обрабатывает кадры. Для проекта видеоаналитики стоит сделать тест на своём видео.

Atlas 300I Pro — более новая карта на одном процессоре 310P. У неё 24 ГБ памяти и 140 TOPS INT8 при 72 Вт, а интерфейс — PCIe 4.0 x16. Atlas 300I старшего поколения построена на четырёх чипах Ascend 310 с 32 ГБ памяти, где у каждого процессора свои 8 ГБ, и работает по PCIe 3.0. Несколько карт Pro можно ставить в один сервер, если хватает слотов и охлаждения. Память при этом не объединяется, и каждая карта работает со своими 24 ГБ. Распределять задачи между картами нужно на уровне приложения или фреймворка.

CUDA не работает. Используется программный стек Huawei CANN: драйвер, прошивка и инструментарий. Поддерживаются PyTorch (через плагин torch_npu) и TensorFlow. Модели обычно конвертируют в формат OM с помощью ATC и запускают через AscendCL, MindSpore или MindX. Код с жёсткой привязкой к CUDA придётся адаптировать. Некоторые операторы могут не поддерживаться, поэтому перенос проекта стоит сначала проверить на тестовой модели.

Мощность платы — 72 Вт. Слот должен обеспечивать 5,5 А по линии 12 В и 2 А по линии 3,3 В, поэтому отдельный кабель питания обычно не нужен. Карта рассчитана на рабочую температуру 0–55 °C. Пассивный радиатор требует направленного воздушного потока в корпусе. Поэтому карту ставят в серверное шасси с вентиляторами, а в обычный настольный ПК без продува — нежелательно.

Нужен ли x86 или Kunpeng? | Это карта половинной высоты и длины (HHHL) размером 169,5 × 68,9 × 18,45 мм и весом 280 г. Интерфейс — PCIe 4.0 x16, с обратной совместимостью с x8, x4 и x2 и с PCIe 3.0. Продавцы указывают совместимость как с серверами Kunpeng (ARM), так и с x86. Перед покупкой уточните у поставщика список проверенных серверов и ОС для конкретной модели и версии драйвера. Совместимость нужно проверять отдельно, потому что у платформ бывают ограничения по BIOS и ядру.

Нет. Это ускоритель инференса, то есть запуска уже обученных моделей. У него нет видеовыходов, и это не универсальный GPU. Его задачи — распознавание текста (OCR), речевая аналитика, рекомендательные системы, модерация контента и видеоаналитика. Для обучения моделей и для игр он не предназначен.

На карте один процессор серии Ascend 310 (310P). Заявлено до 140 TOPS INT8 и 70 TFLOPS FP16. Память — 24 ГБ LPDDR4X с ECC и пропускной способностью 204,8 ГБ/с. Потребление — до 72 Вт, что даёт около 2 TOPS/Вт. Память здесь LPDDR4X, а не HBM, поэтому для больших языковых моделей пропускная способность будет узким местом. Модуль лучше подходит для моделей компьютерного зрения, OCR и распознавания речи. Это пиковые значения из документации Huawei. На практике результат зависит от модели и от оптимизации под CANN.

Остались вопросы?

Наши специалисты с радостью вам ответят и помогут в выборе подходящих для вас решений, продуктов и оборудования

Вы смотрели

Модуль ускорения ИИ Ascend Atlas 200I A2

Артикул: 120-00071

Модуль ускорения ИИ Ascend Atlas 200I A2

Предзаказ

Цена по запросу

Модуль ускорения ИИ Ascend Atlas 300I Pro

Артикул: 120-00070

Модуль ускорения ИИ Ascend Atlas 300I Pro

Предзаказ

Цена по запросу

Модуль ускорения ИИ Ascend Atlas 300V Pro

Артикул: 120-00069

Модуль ускорения ИИ Ascend Atlas 300V Pro

Предзаказ

Цена по запросу

Модуль ускорения ИИ Ascend Atlas 300V

Артикул: 120-00068

Модуль ускорения ИИ Ascend Atlas 300V

Предзаказ

Цена по запросу

Модуль ускорения ИИ Ascend Atlas 300I Duo

Артикул: 120-00067

Модуль ускорения ИИ Ascend Atlas 300I Duo

Предзаказ

Цена по запросу

Модуль ускорения ИИ Ascend Atlas 300I A2

Артикул: 120-00051

Модуль ускорения ИИ Ascend Atlas 300I A2

Предзаказ

Цена по запросу

Модуль ускорения ИИ Ascend Atlas 150

Артикул: 120-00050

Модуль ускорения ИИ Ascend Atlas 150

Предзаказ

Цена по запросу

Сервер для работы с ИИ Ascend Atlas 500 Pro (3000) Server

Артикул: 120-00049

Сервер для работы с ИИ Ascend Atlas 500 Pro (3000) Server

Предзаказ

Цена по запросу

Категории каталога

Во время посещения сайта вы соглашаетесь с тем, что мы обрабатываем ваши персональные данные с использованием метрических программ и даете согласие на использование файлов «cookie». Подробнее