Le fait
Début novembre 2026, l'initiative RoboColosseum a ouvert un banc d'évaluation de politiques robotiques dans le monde réel. La page Hugging Face du projet annonce plus de 100 robots (SO-101, Franka, YAM bimanuels, Unitree G1), plus de 140 scènes et un pool de 10 000 heures d'évaluation gratuites pour les laboratoires académiques. Toutes les tentatives, y compris les échecs, doivent être publiées sur Hugging Face.
Contexte
Deux pistes sont prévues : une piste ouverte (sans entraînement spécifique à la tâche) et une piste de réglage fin (les mêmes 100 démonstrations par tâche pour chaque modèle, puis 25 essais). Un préprint associé (arXiv 2611.02497) rapporte 5 699 comparaisons en aveugle sur 124 sites. Humanoids Daily, qui a interrogé le chercheur Jiafei Duan, souligne le résultat humanoïde : aucune des cinq politiques testées n'a achevé l'une des cinq tâches G1 après réglage fin (porter une boîte, plier une serviette, charger un lave-linge, etc.) ; les scores de progression partielle moyens vont d'environ 13 % à 23 %. Unitree a salué l'usage du G1 sans préciser de don financier ou matériel.
Pourquoi ça compte
Comparer des politiques robotiques reste difficile tant que chaque labo choisit son protocole. Un banc commun, avec les échecs visibles, réduit l'écart entre une démo vidéo et une mesure répétée.
Lecture Neurone21
Le préprint et le lancement ne sont pas la même chose : le nombre de scènes du lancement (plus de 140) dépasse celui de l'étude publiée (124 sites). Les scores humanoïdes sont ceux des auteurs ; la répartition des heures gratuites n'est pas détaillée. À suivre : les premiers classements publics et la publication effective de toutes les vidéos d'échec.