Skip to content

Mit KI weiterarbeiten

Mit KI weiterarbeiten

Wahrnehmung und Rechner ​

Verbinde Blickwinkel → Aufnahmehost → kalibrierte Beobachtung → Anwendung. Control führt Roboteroperationen aus; deine Anwendung verarbeitet Bilder und entscheidet über die Aufgabe.

Blickwinkel ​

Kopf- und Handgelenkperspektiven erfassen Szene und Griff. Das Acht-Kamera-Beispiel ergänzt Ansichten rund um einen PLEXA One S1 auf dem Gessmann-AMR M1.

Nah am Griff
ZED X Mini · GMSL2 · Beispielpositionen

Wahrnehmung für deine Anwendung

Nah am Griff

Drei Stereokameras verbinden den Überblick am Kopf mit Ansichten nahe an den Werkzeugen. Jeder Stream bringt Identität, Zeit und Kalibrierung in die Greiflogik ein.

Drei Perspektiven → Zeit- / Frame-Zuordnung → Greiflogik

Kamerareferenz: Auflösung und Tiefe ​

Stereokamera · Weitwinkeloptik 2,2 mmBild je AugeTiefenbereich · IdealbereichAngegebener Tiefenfehler
ZED X Mini · 50 mm Basisabstand1920 × 1200 bei 15/30/60 fps0,1–8 m · 0,1–4 m< 1,6 % bei 2 m; < 3 % bei 4 m
ZED X · 120 mm Basisabstand1920 × 1200 bei 15/30/60 fps0,3–20 m · 0,3–12 m< 0,8 % bei 2 m; < 4 % bei 12 m

Tiefenbereiche und Fehlerwerte gelten für die genannte Optik und die Referenzabstände. Textur, Licht, Bewegung und Kalibrierung bestimmen das Anwendungsergebnis; engere Optiken besitzen andere Bereiche. Kameravergleich · Tiefenspezifikationen.

Aufnahme und Rechner ​

KamerapfadRechner und Verarbeitung
ZED X Mini / ZED XGMSL2 → passender Capture-Adapter / Deserializer → Jetson → ZED SDK
ZED Mini / ZED 2iUSB 3 → unterstützter NVIDIA-Host → ZED SDK
OAK 4 DEthernet / USB → DepthAI, einschließlich geräteinterner Verarbeitung

Ein Jetson kann GMSL2-Beobachtungen an einen separaten x86-Anwendungsrechner übertragen. Die ZED Box 2 Max bietet acht native GMSL2-Eingänge. Ihre Aufnahmebandbreite unterstützt acht Stereokameras bei 1920 × 1200 / 30 fps oder vier bei 60 fps; die Echtzeitverarbeitung hängt zusätzlich von SDK-Modulen und Jetson-Leistungsmodus ab. Workstation, Industrie-PC oder Embedded-Rechner werden nach GPU-Speicher, Bandbreite, Leistung und Kühlung ausgewählt.

Vom Bild zur Beobachtung
  1. 01
    KameraKopf · Handgelenk · Szene
  2. 02
    Aufnahme / TreiberGMSL2 · USB · Ethernet
  3. 03
    AnwendungsrechnerGPU-PC · IPC · Jetson
  4. 04
    BeobachtungZeit · Frame · Ergebnis
Kameratreiber vergleichen
ZUSAMMENHÄNGE ERKUNDENInteraktives Lehrmodell
  1. 01ZED X Mini
  2. 02GMSL2 + Jetson
  3. 03Netzwerkstream
  4. 04x86-Anwendung

GMSL2 benötigt passende Capture-Hardware und einen unterstützten Jetson. Ein x86-Consumer nutzt einen separat qualifizierten Capture-Host und Netzwerkpfad.

Intrinsik, Extrinsik und Zeitzuordnung geben dem Bildstream seine metrische, räumliche und zeitliche Bedeutung. Erkunde die drei Zuordnungen.

Planungsprofile für Aufnahmewege und Datenzuordnung. Jede physische Kamera mit Identität und Kalibrierakte dokumentieren.

Daten für deine Anwendung ​

BeobachtungDarstellung und Kontext
Stereo / FarbeLinkes/rechtes oder entzerrtes Bild, Bildmodus und Aufnahmezeitstempel
Metrische Tiefe32-Bit-Fließkomma-Z-Tiefe zum linken Bild, explizite Einheiten; optional Konfidenzkarte und XYZ/RGBA-Punktwolke
SystemkontextSensoridentität, Uhrenzuordnung, Transformation ins Aufgabenkoordinatensystem, Kalibrierstand, Gültigkeit und gemessenes Beobachtungsalter

Die Tiefen-API des ZED SDK liefert Messdaten; die 8-Bit-Tiefenvorschau dient der Anzeige. Deine Anwendung verarbeitet Beobachtungen über ihren Prozess-, Netzwerk- oder ROS-2-Kanal und fordert Roboteroperationen über die dokumentierten Robot APIs an.

Ein konfigurierter SICK nanoScan3 Pro I/O bildet den separaten Schutzpfad. Feldabmessungen und Stoppverhalten gehören zu Safety & Inbetriebnahme; Kamerabeobachtungen fließen in die Anwendungslogik ein. Aufnahmeparameter und Sensornachweise bleiben bei der Konfiguration.