BusinessCaseBench encuentra que la IA de vanguardia es sólida en 18 disciplinas empresariales
Investigadores dirigidos por Wharton evaluaron 615 preguntas abiertas, pero el modelo líder satisfizo por completo cada ítem de la rúbrica en menos de la mitad.
By Ryan Merket · Published
Primary source: X
Por qué importa
BusinessCaseBench aporta evidencia de que el progreso de los modelos se extiende al razonamiento en estrategia, finanzas y gestión. También cuantifica la carga de revisión: los borradores sólidos siguen siendo mucho más comunes que las respuestas completas.
Ajay Patel y un grupo de investigadores de Wharton, Carnegie Mellon University y Harvard Business School han presentado un benchmark que muestra que los modelos de IA de vanguardia pueden producir respuestas sólidas en disciplinas empresariales abiertas, extendiendo el progreso medido más allá de las matemáticas, la programación y otras tareas con respuestas fácilmente verificables.…
When you purchase through links in our articles, we may earn a small commission. This doesn’t affect our editorial independence.