Schulungsübersicht
Einführung in die Robotermanipulation und Deep Learning
- Überblick über Manipulationsaufgaben und Systemkomponenten
- Traditionelle Ansätze versus lernbasierte Methoden
- Deep Learning in Wahrnehmung, Planung und Steuerung
Wahrnehmung für Manipulation
- Visuelle Sensorik und Objekterkennung zum Greifen
- 3D-Sehen, Tiefensensorik und Punktwolkenverarbeitung
- Training von CNNs zur Lokalisierung und Segmentierung von Objekten
Greifplanung und -erkennung
- Klassische Greifplanungs-Algorithmen
- Lernen von Greif-Posen aus Daten und Simulation
- Implementierung von Greiferkennungsnetzwerken (z.B. GGCNN, Dex-Net)
Steuerung und Bewegungsplanung
- Inverse Kinematik und Trajektoriengenerierung
- Lernbasierte Bewegungsplanung und Imitationslernen
- Reinforcement Learning für Manipulationssteuerungs-Policies
Integration mit ROS 2 und Simulationsumgebungen
- Einrichten von ROS 2-Knoten für Wahrnehmung und Steuerung
- Simulation robotischer Manipulatoren in Gazebo und Isaac Sim
- Integration neuronaler Modelle für Echtzeit-Steuerung
End-to-End-Lernen für Manipulation
- Kombination von Wahrnehmung, Policy und Steuerung in einheitlichen Netzwerken
- Verwendung von Demonstrationsdaten für überwachte Policy-Lernverfahren
- Domänenanpassung zwischen Simulation und echter Hardware
Evaluation und Optimierung
- Metriken für Greif-Erfolg, Stabilität und Präzision
- Tests unter verschiedenen Bedingungen und Störungen
- Modellkompression und Bereitstellung auf Edge-Geräten
Praxisprojekt: Deep-Learning-basiertes robotisches Greifen
- Gestaltung einer Perception-to-Action-Pipeline
- Training und Testen eines Greiferkennungsmodells
- Integration des Modells in einen simulierten Roboterarm
Zusammenfassung und nächste Schritte
Voraussetzungen
- Fundiertes Verständnis von Robotik-Kinematik und -Dynamik
- Erfahrung mit Python und Deep-Learning-Frameworks
- Vertrautheit mit ROS oder ähnlicher Roboter-Middleware
Zielgruppe
- Robotikingenieurinnen und -ingenieure, die intelligente Manipulationssysteme entwickeln
- Spezialistinnen und Spezialisten für Wahrnehmung und Steuerung, die an Greifanwendungen arbeiten
- Forschende und erfahrene Praxisorientierte im Bereich Robot Learning und KI-gestützter Steuerung
Erfahrungsberichte (2)
Bereitstellung der Materialien (virtuelle Maschine), um direkt mit den Übungen zu beginnen, sowie Erläuterung der ROS2-Kernkonzepte. Warum bestimmte Dinge auf eine bestimmte Weise funktionieren.
Arjan Bakema
Kurs - Autonomous Navigation & SLAM with ROS 2
Maschinelle Übersetzung
sein Wissen und die Nutzung von KI für Robotik in der Zukunft.
Ryle - PHILIPPINE MILITARY ACADEMY
Kurs - Artificial Intelligence (AI) for Robotics
Maschinelle Übersetzung