Wahrnehmung und Rechner
Verbinde Blickwinkel → Aufnahmehost → kalibrierte Beobachtung → Anwendung. Control führt Roboteroperationen aus; deine Anwendung verarbeitet Bilder und entscheidet über die Aufgabe.
Blickwinkel
Kopf- und Handgelenkperspektiven erfassen Szene und Griff. Das Acht-Kamera-Beispiel ergänzt Ansichten rund um einen PLEXA One S1 auf dem Gessmann-AMR M1.
Wahrnehmung für deine Anwendung
Nah am Griff
Drei Stereokameras verbinden den Überblick am Kopf mit Ansichten nahe an den Werkzeugen. Jeder Stream bringt Identität, Zeit und Kalibrierung in die Greiflogik ein.
Drei Perspektiven → Zeit- / Frame-Zuordnung → Greiflogik
Kamerareferenz: Auflösung und Tiefe
| Stereokamera · Weitwinkeloptik 2,2 mm | Bild je Auge | Tiefenbereich · Idealbereich | Angegebener Tiefenfehler |
|---|---|---|---|
| ZED X Mini · 50 mm Basisabstand | 1920 × 1200 bei 15/30/60 fps | 0,1–8 m · 0,1–4 m | < 1,6 % bei 2 m; < 3 % bei 4 m |
| ZED X · 120 mm Basisabstand | 1920 × 1200 bei 15/30/60 fps | 0,3–20 m · 0,3–12 m | < 0,8 % bei 2 m; < 4 % bei 12 m |
Tiefenbereiche und Fehlerwerte gelten für die genannte Optik und die Referenzabstände. Textur, Licht, Bewegung und Kalibrierung bestimmen das Anwendungsergebnis; engere Optiken besitzen andere Bereiche. Kameravergleich · Tiefenspezifikationen.
Aufnahme und Rechner
| Kamerapfad | Rechner und Verarbeitung |
|---|---|
| ZED X Mini / ZED X | GMSL2 → passender Capture-Adapter / Deserializer → Jetson → ZED SDK |
| ZED Mini / ZED 2i | USB 3 → unterstützter NVIDIA-Host → ZED SDK |
| OAK 4 D | Ethernet / USB → DepthAI, einschließlich geräteinterner Verarbeitung |
Ein Jetson kann GMSL2-Beobachtungen an einen separaten x86-Anwendungsrechner übertragen. Die ZED Box 2 Max bietet acht native GMSL2-Eingänge. Ihre Aufnahmebandbreite unterstützt acht Stereokameras bei 1920 × 1200 / 30 fps oder vier bei 60 fps; die Echtzeitverarbeitung hängt zusätzlich von SDK-Modulen und Jetson-Leistungsmodus ab. Workstation, Industrie-PC oder Embedded-Rechner werden nach GPU-Speicher, Bandbreite, Leistung und Kühlung ausgewählt.
- KameraKopf · Handgelenk · Szene
- Aufnahme / TreiberGMSL2 · USB · Ethernet
- AnwendungsrechnerGPU-PC · IPC · Jetson
- BeobachtungZeit · Frame · Ergebnis
Kameratreiber vergleichen
- 01ZED X Mini
- 02GMSL2 + Jetson
- 03Netzwerkstream
- 04x86-Anwendung
GMSL2 benötigt passende Capture-Hardware und einen unterstützten Jetson. Ein x86-Consumer nutzt einen separat qualifizierten Capture-Host und Netzwerkpfad.
Intrinsik, Extrinsik und Zeitzuordnung geben dem Bildstream seine metrische, räumliche und zeitliche Bedeutung. Erkunde die drei Zuordnungen.
Planungsprofile für Aufnahmewege und Datenzuordnung. Jede physische Kamera mit Identität und Kalibrierakte dokumentieren.
Daten für deine Anwendung
| Beobachtung | Darstellung und Kontext |
|---|---|
| Stereo / Farbe | Linkes/rechtes oder entzerrtes Bild, Bildmodus und Aufnahmezeitstempel |
| Metrische Tiefe | 32-Bit-Fließkomma-Z-Tiefe zum linken Bild, explizite Einheiten; optional Konfidenzkarte und XYZ/RGBA-Punktwolke |
| Systemkontext | Sensoridentität, Uhrenzuordnung, Transformation ins Aufgabenkoordinatensystem, Kalibrierstand, Gültigkeit und gemessenes Beobachtungsalter |
Die Tiefen-API des ZED SDK liefert Messdaten; die 8-Bit-Tiefenvorschau dient der Anzeige. Deine Anwendung verarbeitet Beobachtungen über ihren Prozess-, Netzwerk- oder ROS-2-Kanal und fordert Roboteroperationen über die dokumentierten Robot APIs an.
Ein konfigurierter SICK nanoScan3 Pro I/O bildet den separaten Schutzpfad. Feldabmessungen und Stoppverhalten gehören zu Safety & Inbetriebnahme; Kamerabeobachtungen fließen in die Anwendungslogik ein. Aufnahmeparameter und Sensornachweise bleiben bei der Konfiguration.