Struttura del corso
Introduzione alla Manipolazione Robotica e Deep Learning
- Panoramica dei compiti di manipolazione e delle componenti del sistema
- Approcci tradizionali vs. basati sull'apprendimento
- Deep learning nella percezione, pianificazione e controllo
Percezione per la Manipolazione
- Sensing visivo e rilevamento degli oggetti per la presa
- Visione 3D, sensing della profondità e processing di nuvole di punti
- Allenamento di CNNs per la localizzazione e segmentazione degli oggetti
Pianificazione e Rilevamento della Presa
- Algoritmi classici di pianificazione della presa
- Apprendimento delle pose di presa da dati e simulazioni
- Implementazione di reti per la rilevazione della presa (es. GGCNN, Dex-Net)
Controllo e Pianificazione del Movimento
- Inverse kinematics e generazione di traiettorie
- Pianificazione del movimento basata sull'apprendimento e apprendimento per imitazione
- Reinforcement learning per le politiche di controllo della manipolazione
Integrazione con ROS 2 e Ambienti di Simulazione
- Configurazione dei nodi ROS 2 per la percezione e il controllo
- Simulazione di manipolatori robotici in Gazebo e Isaac Sim
- Integrazione di modelli neurali per il controllo in tempo reale
Apprendimento End-to-End per la Manipolazione
- Combinazione di percezione, politica e controllo in reti unificate
- Utilizzo di dati dimostrativi per l'apprendimento supervisionato delle politiche
- Adattamento del dominio tra simulazione e hardware reale
Valutazione e Ottimizzazione
- Metriche per il successo della presa, stabilità e precisione
- Test in condizioni variabili e disturbi
- Compressione del modello e distribuzione su dispositivi periferici
Progetto Pratico: Presa Robotica Basata sul Deep Learning
- Progettazione di un pipeline da percezione ad azione
- Allenamento e test di un modello di rilevazione della presa
- Integrazione del modello in un braccio robotico simulato
Riepilogo e Passi Successivi
Requisiti
- Solida comprensione della cinematica e dinamica robotica
- Esperienza con Python e framework di deep learning
- Familiarità con ROS o middleware robotico simili
Pubblico Target
- Ingegneri robotici che sviluppano sistemi di manipolazione intelligente
- Specialisti di percezione e controllo che lavorano su applicazioni di presa
- Ricercatori e professionisti avanzati nell'apprendimento robotico e nel controllo basato sull'IA
Recensioni (2)
Fornitura dei materiali (macchina virtuale) per iniziare immediatamente gli esercizi e spiegazione del nucleo di ROS2. Il motivo per cui le cose funzionano in un determinato modo.
Arjan Bakema
Corso - Autonomous Navigation & SLAM with ROS 2
Traduzione automatica
le sue conoscenze e l'utilizzo dell'IA per la Robotica nel Futuro.
Ryle - PHILIPPINE MILITARY ACADEMY
Corso - Artificial Intelligence (AI) for Robotics
Traduzione automatica