Процессор с поддержкой ИИ Hailo-15H для камер с видеоаналитикой

Процессор с поддержкой ИИ Hailo-15H — система на кристалле для IP-камер среднего и высокого уровня. Он нужен разработчикам камер видеонаблюдения и интеграторам, которым надо запускать нейросети прямо в камере и получать чистое изображение в темноте. Чип сочетает нейроядро на 20 TOPS, ИИ-обработку изображения (AI-ISP) и видеокодирование. Аналитика идёт на самом устройстве, без постоянной отправки потока в облако.

20 TOPS на борту: несколько нейросетей одновременно

Нейроядро Hailo-15H выдаёт 20 TOPS и обрабатывает сразу несколько моделей глубокого обучения. Для камеры это значит, что детекция, классификация и анализ сцены работают параллельно, а не по очереди.

Обучение моделей остаётся в облаке, а вывод (инференс) выполняется локально. Задержка падает, трафик уменьшается, а видео с людьми не покидает объект без необходимости. По данным производителя, чип укладывается в бюджет мощности и стоимости обычной камеры, а потребление заявлено менее 5 Вт.

AI-ISP снимает шум при освещённости менее 0,01 люкса

Конвейер обработки изображения с ИИ очищает кадр от шума, подтягивает экспозицию и сохраняет цвета в очень тёмных сценах. Производитель называет сценарии: ночная съёмка, помещения и слабо освещённые промышленные зоны.

Поддерживается HDR: чип объединяет длинную и короткую экспозиции, поэтому в кадре с ярким окном и тёмным углом видны детали и там и там. Качество изображения заявлено на уровне 4K30.

Готовые функции: поиск по тексту и маскирование лиц

В набор входят функции, которые не требуют отдельной разработки с нуля. Например, свободный текстовый поиск на базе CLIP сопоставляет кадры с запросом на естественном языке без дообучения под задачу. Динамическое маскирование приватности находит чувствительные области и скрывает их размытием или заливкой, зоны настраиваются.

Для анализа сцены доступна визуально-языковая модель Qwen2.5-VL-3B. Это даёт камере возможность описывать происходящее, а не только рисовать рамки вокруг объектов.

Разработка на Linux с аппаратной защитой

Платформа работает на дистрибутиве Yocto Linux, а в комплекте идут драйверы, библиотеки и инструменты для камер. Для защиты заявлены безопасная загрузка и отладка, аппаратная криптография, TrustZone, генератор случайных чисел TRNG и файрвол.

Минимальный объём оперативной памяти — 2 ГБ, что помогает держать стоимость устройства в рамках. Для старта предусмотрен отдельный комплект разработчика Hailo-15 SBC на одноплатном компьютере.

Ограничение: это компонент для разработчиков, а не готовая камера

Hailo-15H — процессор для встраивания, а не устройство, которое подключают и сразу смотрят видео. Чтобы получить готовый продукт, потребуются плата, сенсор, корпус и программная интеграция. Если задача — просто поставить камеру, лучше взять готовую модель. Если вы делаете собственную линейку камер или прототип, чип экономит месяцы работы над ISP и ускорением нейросетей.

Покупатели Virtuality Club получают оригинальную продукцию по прямым поставкам и техническую поддержку специалистов магазина.

Краткие характеристики по данным производителя

Таблица собирает основные заявленные параметры Hailo-15H.