Un robot qui attrape une pomme sur une table, ça paraît simple. Pour une machine, ça l'est beaucoup moins. Un concours qui vient de se terminer à Shanghai en donne une belle illustration.
Selon Pandaily, qui s'appuie sur un compte rendu du média chinois Robot Forward, Robbyant a clos le 16 novembre son premier concours autour d'un modèle d'IA pour robots. Robbyant est la société d'intelligence artificielle appliquée aux robots du groupe chinois Ant Group. Le principe : tous les participants partent du même modèle, appelé LingBot-VLA 2.0, et doivent l'adapter à une vraie machine.
Un cerveau partagé, offert à tous
Ce modèle est « open source ». En clair, il est publié ouvertement, et chacun peut le récupérer et le modifier. C'est un peu comme une recette de base que chaque cuisinier ajuste à sa façon.
Le succès d'inscription a été au rendez-vous : 1 855 équipes et 3 252 inscrits, venus de 13 pays. Attention, ces chiffres concernent les inscriptions, pas les équipes présentes à la finale. Seules 15 équipes ont atteint l'étape finale, après une première manche en simulation en ligne, c'est-à-dire sur écran, avec des robots virtuels.
48 heures pour passer de l'écran au réel
En finale, les équipes ont travaillé sur des bras robotiques de la marque AgileX Robotics. En 48 heures, elles devaient rassembler des exemples, ajuster le modèle, puis le faire fonctionner sur la machine.
Trois tâches les attendaient : ramasser des fruits et légumes avec un bras, ranger des produits cosmétiques dans une boîte transparente avec un bras, et enfin balayer des débris sur une table puis les vider dans un bac avec deux bras.
Ce qui a coincé, et c'est instructif
Le compte rendu ne cache pas les obstacles. Voir l'intérieur d'une boîte transparente est difficile pour une caméra. La lumière change. Les objets inconnus déroutent la machine. Et certains bras s'affaissent un peu quand ils portent une charge.
Une équipe a aussi constaté qu'ajouter plus d'exemples ne l'aidait pas, car ces nouveaux exemples ne ressemblaient pas aux tâches évaluées. Autrement dit, mieux vaut peu d'exemples bien choisis que beaucoup d'exemples à côté.
L'équipe gagnante, TARS, a utilisé Qwen pour repérer les objets à saisir et ceux à ignorer. Cela a réduit le « bruit » visuel du décor dans les tâches des fruits et des cosmétiques. Pour le balayage, elle a testé l'effet de l'extension du bras sur son affaissement.
Pourquoi c'est une étape, pas une arrivée
Ces constats rejoignent ce que dit Wang Xingxing, président d'Unitree Robotics, un fabricant chinois de robots. Lors du sommet APEC CEO à Shenzhen, le 17 novembre, il a expliqué que le plus dur reste la capacité d'un robot à s'adapter à des lieux inconnus. Son objectif : un seul robot, avec un seul modèle, utile dès son arrivée dans n'importe quelle maison, sans réapprentissage. Selon Pandaily, il n'a annoncé ni nouveau modèle ni date pour un tel robot.
À retenir donc : réussir une démonstration dans un décor préparé ne veut pas dire savoir se débrouiller partout. Ce concours a surtout le mérite de mettre le travail de tous au grand jour, avec un modèle ouvert que d'autres équipes pourront reprendre et améliorer.