Présentation de Grabette

Grabette est un système ouvert et peu coûteux pour enregistrer des données de manipulation. Il permet de capturer des démonstrations de tâches avec une main humaine, un gripper, une caméra et un système de suivi de trajectoire. Les données enregistrées peuvent ensuite être utilisées pour entraîner des robots.

Fonctionnement de Grabette

Grabette est équipé de deux caméras : une caméra fisheye pour fournir un contexte riche et une caméra RGBD pour effectuer un suivi robuste de la trajectoire. Les données sont enregistrées sur un Raspberry Pi et peuvent être traitées en ligne de commande pour générer un jeu de données prêt à l'emploi.

raspberry pi + standard pi camera + OAK-D depth camera + magnetic encoders

Implications et limites

Grabette a le potentiel de résoudre le problème de pénurie de données de manipulation pour les robots. En permettant à tout le monde de contribuer à la création d'un jeu de données ouvert et collaboratif, Grabette peut aider à accélérer le développement de l'apprentissage automatique pour les robots. Cependant, la qualité et la diversité des données enregistrées dépendent de la capacité des utilisateurs à capturer des démonstrations de tâches de manière efficace.

Exemples et applications

Les données enregistrées avec Grabette peuvent être utilisées pour entraîner des robots à effectuer des tâches spécifiques. Par exemple, les données peuvent être utilisées pour entraîner un robot à manipuler des objets ou à effectuer des tâches de montage. Les possibilités d'applications sont vastes et dépendent de la créativité des utilisateurs de Grabette.