TI und Nvidia arbeiten zusammen, um den Weg von der Simulation bis zum sicheren Einsatz humanoider Roboter zu beschleunigen. TI kombiniert seine mmWave-Radartechnologie mit Nvidia Jetson Thor und Nvidia Holoscan für latenzarme 3D-Wahrnehmung und mehr Sicherheit in Physical-AI-Systemen.
Durch die Kombination der Echtzeit-Motorregelungs-, Sensing-, Radar- und Power-Technologien von TI mit den für Robotik-Anwendungen ausgelegten, fortschrittlichen Rechentechnologien sowie den Ethernet-basierten Sensing- und Simulations-Technologien von Nvidia sollen Roboterentwickler in die Lage versetzt werden, Wahrnehmungs-, Aktuierungs- und Sicherheitsfunktionen früher und präziser zu validieren.
Als Bestandteil dieser Kooperation entwickelte TI eine Sensorfusions-Lösung, bei der die hauseigene mmWave-Radartechnologie mithilfe der Nvidia Holoscan Sensor Bridge mit dem Nvidia Jetson Thor verbunden wird, um geringe Latenzen, 3D-Wahrnehmung und Sicherheitsbewusstsein für humanoide Roboter zu realisieren.
Der per Ethernet mit Nvidia Jetson Thor verbundene mmWave-Radarsensor IWR6243 von TI ermöglicht laut Unternehmensangabe sowohl eine skalierbare und latenzarme 3D-Wahrnehmung als auch ein Sicherheitsbewusstsein für Physical-AI-Anwendungen. Durch die Zusammenführung von Kamera- und Radardaten verbessert die Lösung die Objekterkennung, die Ortsbestimmung und das Tracking bei gleichzeitiger Reduzierung von False-Positive-Meldungen, sodass die Voraussetzungen für verlässliche Echtzeit-Entscheidungen in humanoiden Robotern geschaffen werden.
Das System erlaubt eine menschenähnliche Wahrnehmung, die auch in anspruchsvollen Umgebungen zuverlässig funktioniert – von schwachem Licht bis zu starker Blendung sowie bei Nebel und Staub in Innenräumen und unter freiem Himmel. Nicht zuletzt schließt sie eine entscheidende Sicherheitslücke, die den praktischen Einsatz humanoider Roboter bisher einschränkte. Ein Beispiel hierfür sind Glastüren oder reflektierende Oberflächen, die von Kameras nicht zuverlässig erkannt werden, während Radar eine konsistente Detektierung dieser transparenten Hindernisse erlaubt, sodass ein reibungsloses Navigieren beispielsweise in Bürogebäuden, Krankenhäusern und Ladengeschäften möglich ist.