Baseten's Base Labs 使用 6.21M 个示例将 Qwen 转换为决策模型

由 Max Kirkby 领导,该实验室报告称两个开放权重模型在基准测试中获得了最高分,这些模型旨在返回校准的概率而不是生成的答案。

By · Published

Primary source: X

为何重要

Base Labs 正在展示训练后团队如何将现有的开源模型变成专门的决策系统,并且它已公布了足够多的方法细节,使得对基准测试的主张可以被检验。那些收益是否能迁移到真实的工作流程,将比排行榜上的名次更重要。

AI-generated illustration of a humanoid robot beside a branching display listing four options with decimal scores in a modern office.

Max Kirkby 和 Base Labs(Baseten 内部的研究实验室)于 10 月 21 日发布了 mammoth-1 和 elephant-1,将 Qwen 模型转变为对选项进行评分而不是生成散文的专用系统。实验室表示,其 270 亿参数的 mammoth-1 在 Jev Decision Index 中领先,而其 90 亿参数的 elephant-1 在更小的规模上也位列领先者之列。…

When you purchase through links in our articles, we may earn a small commission. This doesn’t affect our editorial independence.

Reader comments

Conversation for this story loads after sign-in.