Google DeepMind vient de présenter Gemini Robotics 2, une nouvelle famille de modèles d’intelligence artificielle conçue pour contrôler des robots de formes très différentes. Contrairement à la génération précédente, principalement limitée au haut du corps, le nouveau système peut coordonner un humanoïde entier. Dans les démonstrations, l’Apollo 2 d’Apptronik marche, s’accroupit, se penche et manipule des objets tout en maintenant son équilibre. Google DeepMind
Des pieds jusqu’au bout des doigts
Gemini Robotics 2 transforme directement les images et les instructions verbales en commandes motrices. Le modèle peut ainsi demander au robot de rejoindre un objet, de le ramasser puis de le déposer à un endroit précis. Il contrôle également des mains à cinq doigts offrant 22 degrés de liberté. Celles-ci peuvent notamment dévisser une ampoule, fermer un sac à glissière ou tenter de nouer un sac-poubelle.
Trois modèles pour penser et agir
Cette nouvelle plateforme repose sur trois modèles complémentaires. Gemini Robotics 2 prend en charge les mouvements physiques, tandis que Gemini Robotics ER 2 sert de cerveau décisionnel. Il peut planifier des tâches durant plusieurs minutes, surveiller leur progression, corriger certaines erreurs et coordonner plusieurs robots. Gemini Robotics On-Device 2 fonctionne pour sa part directement sur la machine, sans dépendre constamment d’une connexion Internet. Selon DeepMind, il peut être adapté à un nouveau type de robot avec moins de 200 exemples recueillis en quelques heures.
Une dextérité encore très inégale
Les vidéos sont impressionnantes, mais les résultats publiés montrent que les robots ne possèdent pas encore la précision humaine. Le système réussit à dévisser une ampoule dans 92 % des essais, mais son taux chute à 36 % lorsqu’il doit la revisser. Il atteint 44 % pour nouer un sac-poubelle et 40 % pour fermer un sac à glissière. DeepMind reconnaît également que la vitesse des mouvements doit encore progresser.
Des prototypes plutôt que des robots domestiques
Gemini Robotics ER 2 est maintenant accessible dans Google AI Studio, mais les modèles qui contrôlent directement les robots demeurent réservés à certains partenaires. Ces démonstrations ne signifient donc pas qu’un humanoïde Gemini est sur le point d’arriver dans nos maisons. Elles montrent toutefois une évolution importante : la même intelligence pourrait éventuellement être transférée entre des bras industriels, de petits robots et des humanoïdes complets. Page officielle de Gemini Robotics 2