Aller au contenu
embodiedrank – accueil

Monde réel

Le test des vrais robots

Les examens en simulation ne suffisent pas : un robot doit faire ses preuves avec de vrais objets. Sur RoboArena, des chercheurs de plusieurs laboratoires donnent la même tâche à deux robots identiques (bras Franka, plateforme DROID), chacun piloté par un modèle différent, sans savoir lequel est lequel, puis désignent le gagnant (comparaison A/B à l'aveugle).

Les résultats forment un score Elo, comme aux échecs : il dit qui bat qui, pas un pourcentage de réussite. Repère : 100 points d'écart ≈ 64 % de chances de gagner un duel.

Qui bat qui ?

Classement officiel : politiques avec au moins 100 évaluations A/B, comme sur le site RoboArena

Classement RoboArena : score Elo issu d'évaluations en conditions réelles
#PolitiqueScore (Elo)Intervalle ± 1 écart-typeDuels gagnés face au n°1*Évaluations A/BDisponibilité
1
DreamZero
Non préciséOpen-source
1735 ± 43référence190○ Hors ligne
0 % sur 30 j
2
π0.5 (version DROID)
Physical Intelligence
1608 ± 3132 %745● En ligne
100 % sur 30 j
3
π0-FAST (version DROID)
Physical Intelligence
1582 ± 3029 %941● En ligne
100 % sur 30 j
4
PaliGemma · vq (DROID)
Non préciséOpen-source
1546 ± 3025 %952● En ligne
100 % sur 30 j
5
PaliGemma · diffusion (DROID)
Non préciséOpen-source
1533 ± 3024 %949● En ligne
100 % sur 30 j
6
PaliGemma · fast specialist (DROID)
Non préciséOpen-source
1531 ± 3024 %1 057○ Hors ligne
0 % sur 30 j
7
PaliGemma · fast (DROID)
Non préciséOpen-source
1516 ± 3022 %1 062○ Hors ligne
0 % sur 30 j
8
π0 (version DROID)
Physical Intelligence
1461 ± 3017 %1 120○ Hors ligne
0 % sur 30 j
9
PaliGemma · binning (DROID)
Non préciséOpen-source
786 ± 500 %629○ Hors ligne
0 % sur 30 j

* Estimation déduite des scores : sur 100 duels contre DreamZero (n°1 officiel), combien la politique en gagnerait. 50 % = niveau égal.

Les positions bougent-elles ?

Score Elo semaine par semaine des 5 premiers du classement officiel

Afficher les données du graphique : Score Elo des 5 premières politiques officielles, par date
Score Elo des 5 premières politiques officielles, par date
DateDreamZeroπ0.5 (version DROID)π0-FAST (version DROID)PaliGemma · vq (DROID)PaliGemma · diffusion (DROID)
8 juin1739 Elo1612 Elo1580 Elo1551 Elo1540 Elo
15 juin1739 Elo1612 Elo1579 Elo1552 Elo1540 Elo
22 juin1739 Elo1615 Elo1580 Elo1552 Elo1537 Elo
29 juin1733 Elo1611 Elo1573 Elo1545 Elo1528 Elo
6 juil.1737 Elo1615 Elo1578 Elo1549 Elo1532 Elo
13 juil.1737 Elo1613 Elo1580 Elo1548 Elo1533 Elo
20 juil.1736 Elo1611 Elo1581 Elo1548 Elo1533 Elo
27 juil.1720 Elo1594 Elo1566 Elo1533 Elo1515 Elo
3 août1721 Elo1593 Elo1567 Elo1534 Elo1518 Elo
10 août1723 Elo1595 Elo1569 Elo1537 Elo1520 Elo
17 août1725 Elo1599 Elo1570 Elo1536 Elo1521 Elo
24 août1969 Elo1843 Elo1815 Elo1780 Elo1765 Elo
31 août1736 Elo1609 Elo1582 Elo1547 Elo1533 Elo
7 sept.1735 Elo1608 Elo1582 Elo1547 Elo1532 Elo
14 sept.1735 Elo1608 Elo1582 Elo1546 Elo1533 Elo
21 sept.1735 Elo1608 Elo1582 Elo1546 Elo1533 Elo
25 sept.1735 Elo1608 Elo1582 Elo1546 Elo1533 Elo

Source : RoboArena · article (arXiv 2506.18123) · classement mis à jour le 25 sept. 2026, 15:50