Камеры с искусственным интеллектом для испытания умного города

Испытание умного города на базе искусственного интеллекта в Риме с использованием изображения Sony датчики с возможностью искусственного интеллекта в составе системы «Smart Tip» предназначены для уменьшения заторов и загрязнения от дорожного движения, сокращения дорожно-транспортных происшествий с пешеходами и минимизации скопления людей в городских автобусах.

Испытание умного города на базе искусственного интеллекта в Риме с использованием датчиков изображения Sony с возможностью искусственного интеллекта в рамках системы «Smart Tip» призвано помочь уменьшить заторы и загрязнение от дорожного движения, сократить количество дорожно-транспортных происшествий с пешеходами и минимизировать скопление людей в городских автобусах.

Испытание предназначено для решения трех «болевых точек», общих для большинства городов:интенсивность движения и заторы, особенно связанные с поиском места для парковки; безопасность пешеходов при переходе дороги; и оптимизация доступности общественного транспорта в эпоху пандемии и в последующий период.

На данный момент в Вечном городе на светофоре развернуты три проверенные концепции системы Smart Tip.

Система Smart Tip, состоящая из двух модулей камер Sony IMX500 с поддержкой AI, расположена на светофоре (Источник:Sony Semiconductor Europe)

Каждая интеллектуальная насадка оснащена двумя датчиками изображения Sony IMX500. Эти датчики, запущенные год назад, в частности, имеют возможность обработки искусственного интеллекта, которая позволяет обрабатывать изображения на краю сети, при этом изображения не покидают интеллектуальный наконечник.

Модуль IMX500 имеет 12,3-мегапиксельный датчик вместе с логическим чипом с дизайном Sony DSP, предназначенным для обработки AI, а также память для хранения модели AI. Возможность обрабатывать изображения на устройстве (без отправки данных в облако) критически важна для работы систем искусственного интеллекта умного города, поскольку она обеспечивает чрезвычайно быструю задержку. Это также обеспечивает конфиденциальность потребителей; изображения не покидают устройство, вместо этого информация извлекается с помощью ИИ и преобразуется в метаданные. Эти метаданные могут включать количество людей, садящихся в автобус или выходящих из него на автобусной остановке, или присутствие пешеходов, переходящих дорогу. (IMX500 может выводить целые изображения или интересующие области / частичные изображения, если это необходимо, но для этого испытания была выбрана передача только метаданных).

«Этот сенсор не выводит изображения, это не камера, это камера, используемая в качестве сенсора - изображение не выходит», - сказал Антонио Авитабиле, управляющий директор по корпоративному альянсу и инвестициям Sony. «Что выходит, так это просто« да, машина »или« нет машины »или количество людей. Идея здесь в том, чтобы служить цели и выполнять свою работу, но без наблюдения за людьми ».

Обработка изображений по краям также позволяет избежать загрузки множества 12-мегапиксельных изображений в облако; одни только метаданные гораздо лучше подходят для передачи через сотовый модем Smart Tip.

щелкните, чтобы увидеть полноразмерное изображение

Три приложения, тестируемые в рамках этого проекта (Источник:Sony Semiconductor Europe)

Три приложения

«Пробки на дорогах - очень большая проблема в крупных городах», - сказал Авитабиле. «Значительная часть связана с тем, что водители ищут свободное парковочное место».

Система искусственного интеллекта «умного города» Рима направлена ​​на отслеживание доступных парковочных мест в режиме реального времени. GPS-данные о доступных пространствах отправляются в облако через сотовый модем системы. Затем водителям можно будет сообщить о своем местонахождении через приложение для мобильного телефона. Идея состоит в том, чтобы водителям не приходилось длительное время разъезжать в поисках свободного места, одновременно уменьшая заторы и загрязнение окружающей среды.

Безопасность пешеходов - еще одна проблема для любого города; ежегодно на дорогах Европы гибнут тысячи пешеходов. Среднее расстояние между пешеходами и транспортными средствами - ключевой показатель, используемый для измерения безопасности пешеходов. Целью исследования является количественный анализ этого. Умные подсказки обнаруживают пешеходов, переходящих дорогу, а затем активируют визуальные или звуковые сигналы для транспортных средств, когда пешеходы переходят дорогу.

Дорожное движение у Римского Колизея (Фото:Борис Стройко)

«Каждый раз, когда обнаруживают пешехода, переходящего дорогу, у нас есть какой-то световой сигнал на переходе, который будет предупреждать водителя о том, что кто-то действительно пересекает дорогу», - сказал Авитабиле. «Мы считаем, что это будет сдерживающим фактором для уменьшения количества травм и смертей на пешеходных переходах».

Общественный транспорт - это третье приложение, которым будет заниматься испытание. Пример Avitabile, умные автобусные остановки, смогут проверить, сколько людей ждут на каждой автобусной остановке, и использовать эту информацию для контроля количества людей на каждой автобусной остановке (что особенно важно во время продолжающейся пандемии). Автобусы также могут не останавливаться на остановках, где нет ожидающих пассажиров. Система также может отслеживать, сколько человек садится и выходит из автобуса на каждой остановке. Эту информацию можно использовать для более точной оптимизации автобусных маршрутов и времени.

Бэкэнд-система

Система Sony Smart Tip включает сервисную платформу, работающую в облаке. Эта платформа будет обрабатывать подготовку и регистрацию устройств Smart Tip. Эта платформа также занимается обучением моделей искусственного интеллекта, которые будут использоваться для обнаружения автомобилей и людей, и производством моделей, которые могут поместиться на устройстве IMX500.

Масштабируемость систем обеспечивается за счет минимизации требований к полосе пропускания (путем отправки только метаданных, как описано выше). Сами умные подсказки идентичны во всех трех случаях использования; только программное обеспечение модели ИИ на каждом из них отличается. Модель ИИ можно загружать или обновлять по воздуху, чтобы повысить эффективность или приспособить различные приложения в будущем.

>> Эта статья изначально была опубликована на нашем дочернем сайте EE Times Europe.