Block-Übertragung mit PCIe

Bild 1 | Die PCIe-Kameras BVS CA-BN2-0032ZG erreicht dank des Block-Scan Mode mit dem 3,2MP Bildsensor Sony IMX252 (2.064x1.544 Pixel) eine Framerate von über 6.000fps.

In vielen Embedded Vision Systemen kommen Bildsensoren zum Einsatz, die über das Camera Serial Interface CSI2 direkt integriert sind. Daraus ergibt sich oft eine funktionale Beschränkung sowie eine Begrenzung in Bezug auf Bildauflösung und Framerate. PCI Express (PCIe) bietet die Möglichkeit, diese Lösungen auch auf einer Standardschnittstelle umzusetzen. Mit der Kamerafamilie BVS CA-BN hat Balluff ein entsprechendes Produkt im Portfolio, das einfach integriert werden kann und auch höhere Bildauflösungen bei entsprechenden Frameraten ermöglicht.

Kameras, IPCs & KI

Bild 2 | Auvidea zeigte einen ultra-kompakten KI-Beschleuniger-Stack, der auf dem Hailo-15H SoC basiert.

Knapp 1.200 Aussteller und ca. 32.000 Besucher konnte die Embedded World Mitte März in Nürnberg begrüßen. Der folgende Beitrag stellt zahlreiche der dort präsentierten Highlights zu Embedded Vision & KI vor.

Sichere Bilder

Um den Sicherheitsanforderungen und Designüberlegungen innerhalb von Embedded Vision Systemen mit CSI-2 gerecht zu werden, hat die MIPI Alliance ein neues Camera Security Framework entwickelt.

Imaging-Anwendungen im IoT-Bereich benötigen hochentwickelte Bildsensen mit immer kleineren Gehäusegrößen, geringerem Stromverbrauch und zu niedrigeren Kosten. Eine Schlüsselanforderung für Entwickler ist aber auch der wirksame Schutz dieser Systeme vor Sicherheitsbedrohungen. Hierfür wurde das MIPI Camera Security Framework entwickelt.

MIPI & FPGA

Der Power SoC ist als Option für alle MIPI Kameras von Vision Components erhältlich und integriert FPGA-Bildvorverarbeitung direkt in das Design der winzigen Kameras.

MIPI-Kameras inklusive Bildvorverarbeitung: Mit einer neuen Kamera-Option und einer Reihe von FPGABeschleunigern vereinfacht
Vision Components die Embedded-Vision-Integration. So können Barcodes 10x schneller gelesen werden als bisher.

Mikrocontroller mit NPU und ISP

Der STM32N6 basiert auf dem ARM CortexR-M55 mit 800MHz. Es ist der erste Mikrocontroller der Serie mit STMicroelectronics eigener NPU, dem Neural-ART Accelerator, der mit 1GHz getaktet ist und bis zu 600GOPS bei einer durchschnittlichen Energieeffizienz von 3-TOPS/W bietet.

MIPI CSI-2 Einplatinen-Kameramodule

Die kompakten MIPI CSI-2 Einplatinen-Kameramodule 36S von The Imaging Source sind für kostengünstige und hochvolumige Embedded-Vision-Projekte optimiert und bieten eine zuverlässige Sensor-zu-ISP-Verbindung, die bis zu vier Bilddatenkanäle mit einem Gesamtdurchsatz von bis zu 10GB/s unterstützt.

Edge Vision im Praxistest

Bild 1 | Durch die Kombination von Hardware, Software und Services ermöglicht das Industrial Edge Ökosystem skalierbare Bildverarbeitungslösungen, z.B. mit entsprechenden Apps von Basler oder MVTec.

Mit der Aufnahme des Vision Connectors von Basler und der Anomaly Detection for Visual Inspection von MVTec in das Siemens Industrial Edge Ecosystem können Vision-Lösungen einfacher in Automatisierungslandschaften integriert werden. Anstelle komplexer Insellösungen entsteht ein flexibles System, in dem sich Lösungen mit wenigen Klicks skalieren und verwalten lassen. Ein Jahr nach dem Start stellt sich die Frage: Wie haben sich die Lösungen in der Praxis bewährt und weiterentwickelt?

Food Observation

Image 1 | The Smart Replenishment Solution Dashboard

Applied firstly in the fresh food shelves in supermarkets, an intelligent solution of Macnica ATD Europe and Asus IoT combines shelf compliance and electronic shelf labeling (ESL) for the retail business. It involves a camera-based and AI-driven system to automate the replenishment process by alerting when stock is low, and focuses on automating price tag changes using electronic shelf labeling.

MIPI-Vision

Image 2 | Emerging Vision System Architecture Considerations (*Current developments)

Machine vision (MV) is poised for a more intelligent and powerful future, driven by advancements in AI-assisted image signal processing (ISP) and sensing. The MIPI Camera Working Group and Camera Interest Group continue to actively engage with the broader industry to identify emerging vision applications and drive the ongoing evolution of MIPI CSI-2, the widely adopted camera interface introduced in 2005.

Vorhergesagte Bewegungen

Bild 1| Bei bewegten Objekten ist es erforderlich, ihr Verhalten in Echtzeit vorhersagen zu können. FPGA-basierte KI-Vision Plattformen helfen diese Aufgaben zu erledigen.

Multikamera basierte KI-Visionanwendungen revolutionieren derzeit die Objekterkennung und -verfolgung. FPGA-basierte modulare Plattformen sind prädestiniert für den Aufbau solcher echtzeitfähiger Lösungen. In Anwendungen mit mehreren Kameras müssen die Daten zudem synchronisiert und Vorhersagen über die Bewegung von Objekten in einem zu spezifizierenden Raum getroffen werden. N.A.T. bietet OEMs für entsprechende Lösungsplattformen.