Baseten's Base Labs 使用 6.21M 个示例将 Qwen 转换为决策模型
由 Max Kirkby 领导,该实验室报告称两个开放权重模型在基准测试中获得了最高分,这些模型旨在返回校准的概率而不是生成的答案。
By Ryan Merket · Published
Primary source: X
为何重要
Base Labs 正在展示训练后团队如何将现有的开源模型变成专门的决策系统,并且它已公布了足够多的方法细节,使得对基准测试的主张可以被检验。那些收益是否能迁移到真实的工作流程,将比排行榜上的名次更重要。

Max Kirkby 和 Base Labs(Baseten 内部的研究实验室)于 10 月 21 日发布了 mammoth-1 和 elephant-1,将 Qwen 模型转变为对选项进行评分而不是生成散文的专用系统。实验室表示,其 270 亿参数的 mammoth-1 在 Jev Decision Index 中领先,而其 90 亿参数的 elephant-1 在更小的规模上也位列领先者之列。…
When you purchase through links in our articles, we may earn a small commission. This doesn’t affect our editorial independence.