Ambarella представляет CV28M SoC для интеллектуальных периферийных камер с ИИ-видеокодированием

Ambarella, ведущий провайдер процессоров компьютерного зрения, представила новый SoC, расширяющий портфолио CVflow и нацеленный на более широкий спектр умных устройств, требующих гибкого периферийного ИИ-сенсирования и обработки.

CV28M, последнее дополнение к семейству CVflow, интегрирует передовые обработку изображения, высокоразрешающее видеокодирование и ускорение компьютерного зрения в единый низкопотребляющий пакет. Две возможности выделяются для интеллектуального периферийного сенсирования и эффективности пропускной способности: ИИ-базированный rate control — оптимизирующий качество изображения при сокращении хранилища и сетевой пропускной способности — и ИИ-Timelapse, который анализирует сцены для записи только моментов, считающихся ценными, устраняя необходимость просматривать часы футажа.

Жером Жиго, директор маркетинга Ambarella, сказал: «ИИ-базированный битрейт контроль — это способность использовать ИИ-движок Ambarella CVflow для анализа каждого кадра перед кодированием для нахождения самых важных регионов каждого кадра (таких как лицо или автомобиль например) и возможности кодировать этот конкретный регион видео с более высоким качеством по сравнению с другими регионами, не содержащими важной информации, таких как фон или другие неважные объекты».

Кроме того, Крис Дэй, вице-президент маркетинга и бизнес-развития Ambarella, объяснил embedded.com, что новое устройство использует тот же ИИ-движок и возможность, что и его CV25, но адресует новые cost-conscious рынки и позволяет новый класс умных периферийных устройств для приложений включая умную домашнюю безопасность, ритейл-мониторинг, потребительскую робототехнику и мониторинг заполненности.

«Вокруг нас устройства становятся умнее, и с нашим новейшим CV28M SoC наши клиенты могут разрабатывать новое поколение интеллектуальных сенсорных камер для множества новых приложений. В приватностно-чувствительных приложениях — таких как мониторинг ритейл-магазинов, рабочих мест, арендной недвижимости или пожилых дома — периферийная ИИ-обработка может поддерживать интеллектуальный мониторинг и быстрое принятие решений без требования записывать или стримить видео в облако».

Он сказал, что главное отличие нового камерного SoC в том, что он использует двухъядерный Arm Cortex-A53 вместо четырехъядерного устройства. Это приводит к большей эффективности для периферийного сенсирования ИИ и до 30% снижению стоимости. Он добавил, что для многих более потребительски-ориентированных встроенных видения приложений им не нужна полная ИИ-способность CV25, поэтому новый CV28M предоставляет более целевой подход.

Для ИИ-сенсирования приложений таких как ритейл-мониторинг или мониторинг заполненности, CV28M предоставляет ИИ-производительность для принятия всех решений в камере, сохраняя приватность и избегая тяжелой видеопроцессинга на бэкенд-серверах. В потребительских робототехнических приложениях CV28M может быть подключен к широкому спектру сенсоров таких как видимый, структурированный свет и time-of-flight (ToF) для захвата и затем обработки данных, требуемых для навигации.

CV28M доставляет эффективное видеокодирование в обоих форматах AVC и HEVC. Высокопроизводительный процессор сигнала изображения (ISP) доставляет выдающуюся визуализацию в условиях низкого света, и высокодинамический диапазон (HDR) обработка извлекает максимум деталей изображения в высококонтрастных сценах. Камерный SoC включает полный набор передовых кибербезопасностных фич для защиты от взлома, включая secure boot, TrustZone и I/O виртуализацию. Изготовленный в 10 нм ультра-низкопотребляющей процессной технологии, CV28M чип оптимизирован для безпроводных камерных приложений, требующих долгой автономной работы и малых форм-факторов.

CV28M чип разделяет общий SDK и компьютерное зрение (CV) инструменты с семействами Ambarella CV25, CV22 и CV2 CVflow SoC, упрощая разработку камер с множественными ценовыми и производительностными опциями. Полный набор CV инструментов помогает клиентам портировать свои нейросети на CV28M и включает компилятор, отладчик и поддержку индустриально-стандартных ML фреймворков таких как Caffe и TensorFlow, с обширными гайдлайнами для оптимизации производительности сверточных нейросетей (CNN).