Sakana AI 将证据核查构建进其开源 AI 科学家

David Ha 的第三代研究系统为编码代理分配并行实验、基线和消融实验,同时研究人员仍然负责评判结果。

By · Published

Primary source: X

为何重要

Sakana 正将证据核查和人工审查视为 AI 研究代理的核心组成部分。其早期结果展示了该工作流程可以自动化的内容,而评分错误的候选项则揭示了为何科学判断仍然无法被移交。

Sakana AI builds evidence checks into its open-source AI scientist — David Ha's third-generation research system assigns coding agents parallel experiments, baselines and ablations, while researchers remain responsible for judging the…

Sakana AI 已发布 The Agentic Scientist,这是第三代系统,可在研究任务中协调编码代理,并添加自动基线和消融以测试表面上的结果是否成立。联合创始人兼首席执行官 David Ha (@hardmaru) 于 10 月 15 日宣布了该版本;论文在两天前,即 10 月 13 日,已提交到 arXiv。代码在 Apache 2.0 许可证下可用。

对 Ha 而言,此次发布扩展了围绕集体智能和自然启发系统构建的研究计划。在 2023 年共同创立总部位于东京的 Sakana AI 之前,他曾领导 Google Brain 的日本研究团队。该新系统将这一论点置于实用的研究工作流程中:它不是让一个代理一次性写出论文,而是协调并行的工作者提出想法、运行实验并通过共同的脚手架共享发现。

此发布的核心主张关乎证据,而非论文产出。Sakana 的 技术论文 描述了一个流程:起草任务、生成并测试想法、汇总结果、构建基线和消融、运行事后分析并准备稿件。一个元控制器管理这些代理,并将它们的工作与任务特定的评分标准进行核对。预期结果是一篇其主张可以追溯到实验、代码和记录输出的论文。…

When you purchase through links in our articles, we may earn a small commission. This doesn’t affect our editorial independence.

Reader comments

Conversation for this story loads after sign-in.