ИИ в кармане: Raspberry Pi представляет камеру, способную мыслить

Raspberry Pi представила новое устройство — модуль камеры AI Camera, предназначенный для ускорения работы нейросетей и интеграции ИИ в проекты с Raspberry Pi. Новая камера оснащена сенсором Sony IMX500 с интегрированным ИИ-ускорителем, который позволяет обрабатывать данные с минимальной нагрузкой на процессор.

AI Camera поддерживает работу с различными ИИ-моделями, отличается низким энергопотреблением и быстрой реакцией. Устройство совместимо со всеми моделями Raspberry Pi, включая Raspberry Pi Zero, благодаря использованию стандартных шлейфов.

Основные характеристики AI Camera:

• 12-мегапиксельный датчик изображения Sony IMX500;
• Режимы работы сенсора: 4056×3040 при 10 FPS и 2028×1520 при 30 FPS;
• Размер пикселя — 1,55 x 1,55 мкм;
• Угол обзора — 78°, фокусировка настраивается вручную;
• Встроенный микроконтроллер RP2040 для управления нейросетями и прошивкой (со встроенной SRAM).

Интегрированный ИИ-ускоритель позволяет использовать популярные модели, такие как TensorFlow и PyTorch, а также создавать новые, оптимизированные под возможности устройства.

Хотя чип RP2040 не предназначен для замены графических процессоров Nvidia в задачах, связанных с искусственным интеллектом, его использование вместе с сенсором изображения позволяет создавать модуль для захвата и обработки изображений с помощью нейросетей. Преимущество такого подхода в том, что обработка визуальных данных происходит непосредственно на камере, и основной одноплатный компьютер Raspberry Pi остаётся свободным для других задач, без необходимости использования отдельного ускорителя. Модуль совместим со всеми компьютерами Raspberry Pi.

Примеры использования AI Camera включают обнаружение объектов (MobileNet SSD) или анализ поз (PoseNet) в режиме 1080p при 30 FPS. Также камера может найти применение, например, в качестве умных сенсоров в городе, которые определяют наличие парковочных мест или отслеживают транспортные потоки. В промышленности устройство может помочь в задачах автоматизированного контроля качества, позволяя обнаруживать дефекты на конвейере.

Популярность продуктов Raspberry Pi среди компаний связана с возможностью масштабного производства устройств и модулей. После ограничений на поставки, возникших после пандемии, Raspberry Pi смогла стабилизировать производство, обеспечив бесперебойное снабжение своих клиентов. Кроме того, AI Camera будет выпускаться до января 2028 года, что гарантирует доступность для долгосрочного использования в различных проектах.