Ambarella нацелена на интеллектуальное распознавание краев с помощью новой SoC камеры

Компания Ambarella, производящая микросхемы компьютерного зрения, объявила о выпуске нового процессора в своем семействе камер на кристалле (SoC), нацеленного, по ее словам, на более широкий спектр приложений для интеллектуальных устройств, требующих гибкого распознавания и обработки искусственного интеллекта на периферии.

Его новая SoC для камеры CV28M является последней в семействе CVflow, сочетающей в себе передовую обработку изображений, кодирование видео с высоким разрешением и обработку компьютерного зрения в единой конструкции с низким энергопотреблением. Две из особенностей новой SoC камеры, которые особенно важны для интеллектуального распознавания границ и низкой пропускной способности, - это управление скоростью на основе искусственного интеллекта для оптимизации качества изображения при одновременном снижении требований к хранилищу видео и пропускной способности сети, что особенно полезно в камерах IP-безопасности; и его AI Timelapse, который использует анализ сцены для записи только тех моментов, которые он считает полезными, и позволяет избежать времени, необходимого для сканирования временных шкал видео, чтобы извлечь интересующие моменты.

Джером Жиго, директор по маркетингу Ambarella, сказал:«Управление битрейтом на основе AI - это возможность использовать движок Ambarella CVFlow AI для анализа каждого кадра перед кодированием, чтобы найти наиболее важные области каждого кадра (например, лицо или автомобиль. например) и иметь возможность кодировать эту конкретную область видео с более высоким качеством по сравнению с другими областями, которые не содержат какой-либо важной информации, такой как фон или другие неважные объекты ».

Кроме того, Крис Дэй, вице-президент по маркетингу и развитию бизнеса в Ambarella, объяснил embedded.com, что новое устройство использует тот же механизм ИИ и возможности, что и его CV25, но ориентировано на новые экономичные рынки и обеспечивает новый класс интеллектуальные периферийные устройства для приложений, включая безопасность умного дома, мониторинг розничной торговли, бытовую робототехнику и мониторинг занятости.

«Устройства вокруг нас становятся умнее, и с нашей новейшей SoC CV28M наши заказчики могут разрабатывать новое поколение интеллектуальных камер для различных новых приложений. В чувствительных к конфиденциальности приложениях, таких как мониторинг розничных магазинов, рабочих мест, сдаваемой в аренду собственности или пожилых людей дома, обработка ИИ на основе периферии может поддерживать интеллектуальный мониторинг и быстрое принятие решений без необходимости записи или потоковой передачи видео в облако ».

Он сказал, что основное отличие новой SoC камеры заключается в том, что в ней используется двухъядерный Arm Cortex-A53, а не четырехъядерный. Это приводит к повышению эффективности ИИ с распознаванием кромок и снижению затрат до 30%. Он добавил, что для многих более ориентированных на потребителя приложений для встраиваемых систем машинного зрения им не нужны все возможности искусственного интеллекта CV25, поэтому новый CV28M обеспечивает более целенаправленный подход.

Для приложений обнаружения AI, таких как мониторинг розничной торговли или мониторинг занятости, CV28M обеспечивает производительность AI для принятия всех решений в камере, сохраняя конфиденциальность и избегая тяжелой обработки видео, выполняемой на внутренних серверах. В приложениях потребительской робототехники CV28M может быть подключен к широкому спектру датчиков, таких как видимый, структурированный свет и времяпролетный (ToF), для захвата, а затем обработки данных, необходимых для навигации.

CV28M обеспечивает эффективное кодирование видео в форматах AVC и HEVC. Высокопроизводительный процессор сигналов изображения (ISP) обеспечивает выдающееся качество изображения в условиях низкой освещенности, а обработка с расширенным динамическим диапазоном (HDR) извлекает максимальную детализацию изображения в высококонтрастных сценах. SoC камеры включает полный набор расширенных функций кибербезопасности для защиты от взлома, включая безопасную загрузку, TrustZone и виртуализацию ввода-вывода. Микросхема CV28M, изготовленная по 10-нм техпроцессу со сверхнизким энергопотреблением, оптимизирована для беспроводных приложений камеры, требующих длительного времени автономной работы и малых форм-факторов.

Микросхема CV28M использует общие инструменты SDK и компьютерного зрения (CV) с семействами Ambarella CV25, CV22 и CV2 CVflow SoC, что упрощает разработку камер с множеством вариантов цены и производительности. Полный набор инструментов CV помогает клиентам переносить собственные нейронные сети на CV28M и включает компилятор, отладчик и поддержку стандартных отраслевых структур машинного обучения, таких как Caffe и TensorFlow, с подробными рекомендациями по оптимизации производительности сверточной нейронной сети (CNN).