Renesas Electronics Perception Quick Start Software für ADAS-Entwicklungen

COD-Beispiel.
COD-Beispiel.

Die neue Perception Quick Start Software für das R-Car V3H SoC von Renesas Electronics umfasst Referenzsoftware für kameragestützte Hinderniserkennung (COD), LiDAR-Hinderniserkennung (LOD) sowie Software zur Erkennung von Fahrbahneigenschaften (RFD).

Die R-Car V3H SoCs von Renesas Electronics verbinden hohe Bildverarbeitungsleistung mit KI-Verarbeitung bei geringem Energieverbrauch und liefern damit eine optimierte Embedded-Lösung für Fahrzeugfrontkameras und Lidar in automatisierten Fahrzeugen der Stufe 2+. Um modernste Erkennungstechnologie zu erreichen, hat Renesas die SoCs mit speziellen Hardware-Beschleunigern für Schlüsseltechnologien wie konvolutionale neuronale Netze (CNNs), Dense Optical Flow, Stereo-Disparität und Objektklassifizierung ausgestattet. Die neue Software bietet Entwicklern, die mit diesen komplexen, aber kostengünstigen und energieeffizienten Beschleunigern arbeiten, eine End-to-End-Pipeline-Referenz. Diese ermöglicht es Kunden, ihr Anwendungsdesign unmittelbar zu starten, unabhängig davon, ob sie über Expertise im Einsatz von optimierten Beschleunigern oder nur über begrenzte Erfahrung verfügen. Die Referenzsoftware umfasst das Einlesen von Sensor- oder aufgezeichneten Daten, alle Verarbeitungsschritte sowie die Darstellung auf einem Bildschirm.

Die wichtigsten Funktionen der Renesas Perception Quick Start Software

  • Die COD-Referenzsoftware nutzt ein CNN-IP, eine CV-E (Computer Vision Engine) und Bildwiedergabe-Technologie (IMR – Image Rendering), um 2D-Objekte wie Autos, Lastwagen, Busse und Fußgänger zu erkennen und zu markieren. Die COD erreicht ca. 30 Bilder pro Sekunde (FPS).
  • Die LOD-Software verwendet CNN-IP und CV-E, um 3D-Objekte, einschließlich Autos und Lastwagen, zu erkennen. Die LOD erreicht ca. 15 FPS und markiert Objekte bis 50 Meter Entfernung mit 3D-Rahmen.
  • Die RFD-Referenzsoftware umfasst CNN-IP, CV-E, IMR und eine vielseitige Pipeline-Engine (IMP), um befahrbaren freien Raum, Fahrspuren (überquerbar und nicht überquerbar), Straßenbegrenzungen und Entfernungen zu Fahrspuren und nächstgelegenen Objekten zu identifizieren und damit NCAP 2020 zu unterstützen. Die RFD erreicht ca. 30 FPS.

Die Renesas Perception Software ist ab sofort in den USA sowie demnächst weltweit verfügbar.