Robocurve dice que Opus 5.5 iguala a Astra en robots por un 21% menos
En 360 ensayos con robots reales, Opus 5.5 registró en promedio un avance del 36% a un costo estimado de 90 centavos por ejecución; Astra completó más tareas por completo.
By Ryan Merket · Published
Primary source: X
Por qué importa
El benchmark establece una comparación medible de costos y rendimiento en ensayos con robots reales, mientras que su selección de las tareas más fáciles de Astra y los bajos recuentos de finalización muestran por qué el progreso promedio por sí solo es un indicador incompleto de una autonomía útil.
El 23 de septiembre, Jay Chooi (@chooi_jeq) y cuatro colegas en Robocurve informaron que Opus 5.5 logró casi el mismo progreso promedio que GPT-6 Astra en 360 ensayos con robots reales, a un menor costo estimado de inferencia del modelo. La comparación proviene del propio informe RoboDojo-RC Tier 1 de Robocurve, que también deja claro lo que las medias del titular omiten: Astra completó cinco tareas, mientras que Opus 5.5 completó una.…
When you purchase through links in our articles, we may earn a small commission. This doesn’t affect our editorial independence.