GPT-6 Astra alcanza 53% en la prueba comparativa de codificación de Rails mientras Gemini retrocede
GPT-6 Astra alcanzó una precisión del 53%, Gemini sufrió una regresión y un modelo de OpenAI que previamente no había obtenido puntuación de repente completó 16 ejecuciones.
By Ryan Merket · Published
Primary source: Ruby on Rails on X
Por qué importa
Los ajustes de razonamiento pueden cambiar la economía de los agentes de codificación tanto como la elección del modelo. Rails encontró mejoras que van desde cero hasta 27 puntos, mientras que los costos agregados casi se duplicaron.
Ruby on Rails puso a todos los modelos elegibles en su benchmark de desarrollo de funciones en la configuración de razonamiento más alta disponible, lo que produjo grandes ganancias para los modelos de OpenAI, poco movimiento en otros lugares y una factura total que casi se duplicó.
…
When you purchase through links in our articles, we may earn a small commission. This doesn’t affect our editorial independence.