Baseten's Base Labsが6.21Mの例でQwenを意思決定モデルに変換

Max Kirkbyが率いる研究室は、生成された回答ではなく較正された確率を返すように設計された2つのオープンウェイトモデルで主要ベンチマークのトップスコアを報告した。

By · Published · Updated

Primary source: X

なぜ重要なのか

Base Labsは、ポストトレーニングチームが既存のオープンモデルを専門化された意思決定システムに変える方法を示しており、ベンチマークの主張を検証可能にするのに十分な手法を公開している。これらの改善が実際のワークフローに反映されるかどうかが、リーダーボード上の順位より重要だ。

AI-generated illustration of a humanoid robot beside a branching display listing four options with decimal scores in a modern office.

Max Kirkby と Baseten 内の研究所である Base Labs は、mammoth-1 と elephant-1 を10月21日に公開し、Qwenモデルを文章を生成するのではなく選択肢をスコアリングする専門システムへと変えました。ラボによれば、270億パラメータの mammoth-1 が Jev Decision Index をリードしており、90億パラメータの elephant-1 はより小さなサイズでリーダーの一角に入っているといいます。…

When you purchase through links in our articles, we may earn a small commission. This doesn’t affect our editorial independence.

Reader comments

Conversation for this story loads after sign-in.