AI在科研领域究竟能发挥多大的作用?一个最新发布的评测基准给出了令人意外的答案。由上海人工智能实验室联合清华大学、复旦大学、牛津大学等知名高校共同打造的AI4S评测基准ResearchClawBench发布最新排行榜,开源AI科研工作台Open Science Desktop以22.8分的总平均分位列第一,超越Anthropic旗下Claude Code的21.5分和OpenAI旗下Codex CLI的18.4分,成为该榜单发布以来首个登顶的开源项目。这一结果引发业界广泛讨论,开源AI工具在科研场景中正在展现出比商业AI更强的竞争力。
ResearchClawBench的诞生源于一个现实需求:现有的AI评测基准主要关注代码生成和数学解题,并没有一个专门针对"完整科研能力"的评估框架。科研是一项综合性的知识劳动,涉及文献调研、实验设计、数据分析和论文撰写等多个环节,任何一个环节的短板都会影响最终的科研产出质量。ResearchClawBench的设计逻辑就是系统性地评估AI在科研全流程上的综合能力,而不仅仅是单点性能。
基准测试包含198个覆盖物理学、化学、生物学、材料科学等16个学科的真实科研任务,每项任务都有经过领域专家审核的参考答案。评测维度涵盖了五个方面:文献调研能力(能否高效准确地检索和理解相关文献)、实验设计能力(能否产出可执行的实验方案)、代码实现能力(能否正确编写实验所需的分析代码)、数据解读能力(能否从实验结果中得出合理结论)和论文组织能力(能否将研究成果整合为结构完整、逻辑清晰的论文)。Open Science Desktop在这次全面的评测中排名第一,充分证明了其在科研全流程中的综合实力。
Open Science Desktop是一款基于MIT开源协议发布的AI科研工作台,同时支持macOS、Windows和Linux三大平台。其核心是将AI的完整科研能力封装为桌面应用,所有研究数据、会话记录和实验产物默认存储在本地,用户无需将未发表的研究内容上传至云端。产品内置了七个模块化的Agent Skill:research-explorer负责课题探索,基于用户输入的初始研究方向自动生成研究问题假设;literature-survey负责文献综述,可自动生成6至20页的综述报告并附带60余条真实学术引用。
experiment-suite负责实验设计,能根据文献综述的结论自动生成实验方案并输出可运行的代码和可视化图表;paper-writer负责论文撰写,可将实验数据和分析结果整合为8至14页的完整研究论文;integrity-auditor负责完整性审计,检查论文的逻辑漏洞和实验设计的缺陷。这种模块化架构让AI科研工具的专业能力达到了前所未有的高度。在评测中,Open Science Desktop在"从零开始研究"的端到端任务上表现尤为突出,一个关于催化剂设计的任务,工具从搜索文献到生成完整的催化机理分析论文,总共用时40分钟,而人类研究者通常需要3到5周。在生成的论文质量上,领域专家的评分达到3.6分(满分5分),超过了许多硕士毕业生的论文水平。
Open Science Desktop能够超越Anthropic Claude Code和OpenAI Codex CLI并非偶然。Claude Code和Codex CLI虽然在纯编程任务上表现出色,但它们在科研场景中存在两个先天不足:一是缺乏学科知识的深度嵌入,在涉及具体科学领域专业术语和研究方法时表现不佳;二是缺乏对科研全流程的端到端优化,它们擅长解决"如何写代码"的问题,但不擅长回答"应该研究什么"和"这个实验结果意味着什么"。
而Open Science Desktop的优势恰恰在于"全流程覆盖"和"领域无关"两个设计特点。它不绑定任何单一AI模型提供商,用户可以根据任务需求自由切换底层模型,在文献调研阶段使用擅长检索的模型,在数据分析阶段使用适合编程的模型,在论文撰写阶段使用文笔流畅的模型。如果底层模型的组合不是最优的,用户甚至可以在某个步骤上单独替换模型,而不会影响整个流程的完整性。这种灵活性和自主性在researchClawBench的评测中直接转化为了更高的单项得分。Open Science Desktop在文献调研任务上得分24.1分,实验设计任务上得分22.5分,论文撰写任务上得分23.4分,三项均超过Claude Code和Codex CLI,展现出其在科研全流程上的均衡优势。
Open Science Desktop的开源策略具有深远的产业意义。当前AI4S领域的工具生态呈现出两极分化的态势:一端是商业公司的封闭产品,功能强大但价格高昂,且存在数据合规风险;另一端是零散的开源工具,功能专一但缺乏全流程整合能力。Open Science Desktop填补了中间的空白,作为一个功能完整、数据安全、完全可定制化的开源方案,它为学术界和产业界的科研人员提供了一个前所未有的选择。
中国科研领域对这一工具的需求尤为迫切。据科技部数据,中国科研人员总数超过180万人,但真正能够熟练使用AI工具辅助科研的比例仍然不足10%。Open Science Desktop的发布大幅降低了AI科研工具的使用门槛,科研人员不需要掌握编程技能,只需输入研究方向,AI就能自动完成整个科研流程。这一工具如果能在国内高校和科研院所中大规模推广,有望将中国科研的AI辅助率在两年内提升至40%以上,对提升整体科研效率具有重要意义。上海人工智能实验室已在微信开放社区上线了Open Science Desktop的中文版,并启动了与国内多家高校的合作试点,加速其在国产科研生态中的普及应用,让更多中国的科研工作者受益于AI4S技术带来的科研范式变革。