Présentation de Gemini Robotics 2

Google DeepMind a présenté la série de modèles Gemini Robotics 2, conçue pour alimenter les robots humanoïdes. Cette série permet à plusieurs machines autonomes de collaborer sur une tâche et d'automatiser des corvées composées de centaines d'étapes.

Architecture et fonctionnement

Les robots humanoïdes utilisent souvent une architecture de type dual-system AI, qui combine deux modèles d'intelligence artificielle pour effectuer des tâches. Le premier modèle, appelé algorithme de raisonnement incarné, crée un plan de haut niveau pour exécuter une tâche, puis envoie le plan à un modèle VLA (Visual-Language Alignment) pour convertir les instructions en commandes de bas niveau pour les moteurs du robot.

La série Gemini Robotics 2 met en avant un algorithme de raisonnement incarné appelé Gemini Robotics ER 2, qui permet aux utilisateurs de décrire les tâches à effectuer en langage naturel. Ce modèle prend en charge des tâches composées de centaines d'étapes et peut les diviser entre plusieurs robots pour accélérer leur exécution.

Caractéristiques et avantages

Le modèle Gemini Robotics ER 2 est équipé de deux fonctionnalités qui améliorent le flux de travail. La première permet de suivre la progression d'une tâche à l'aide de footage provenant des caméras du robot, ce qui permet d'identifier les dernières étapes correctement exécutées et de reprendre là où le robot s'est arrêté. La seconde améliore la capacité du modèle à déterminer quand une tâche est terminée, ce qui permet aux robots de passer plus rapidement à la tâche suivante.

Les développeurs peuvent accéder à ER 2 via Google Cloud, l'API Gemini et Google AI Studio.

Implications et limites

La série Gemini Robotics 2 est accompagnée d'un nouveau benchmark de sécurité pour l'intelligence artificielle incarnée, appelé ASIMOV-Agentic Benchmark, qui évalue la capacité des robots humanoïdes à éviter les collisions et autres risques. Cela souligne l'importance de la sécurité et de la fiabilité dans le développement de l'intelligence artificielle pour les robots humanoïdes.