您的位置首页 >人工智能 >

SPU 湿实验预测基准发布算力、推理加码不生效,顶尖 AI 难预测真实实验结果

UniPat AI 推出被称作史上最严的 SPU(Science Prediction Universe)湿实验预测基准,测试结果显示,单纯把模型推理拉满、算力直接翻 5 倍,对预测真实湿实验结果的提升十分有限,哪怕是 Opus 5.5、GPT-6 Astra 这类当前顶尖大模型,在这套基准上的表现都不理想。这套基准和普通刷题式评测不一样,它不考文献背诵、选择题作答,而是直接给 AI 实验条件,让 AI 预判真实实验室里的湿实验产出,包含 4207 组已经做完的真实湿实验数据,一共 116 项任务,覆盖化学、材料、生物、医学四大方向,评审团队来自哈佛、斯坦福、康奈尔等高校和生物技术企业。大家看懂这个榜单,首先分清传统 AI 评测和湿实验预测基准的差别,再理解为什么堆算力、加长推理思考时长很难提分,最后看懂它对 AI for Science 领域的价值,不能再用常规大模型跑分思路去判断科研 AI 的真实能力。

一、SPU 湿实验基准核心信息汇总表

项目详情
基准名称Science Prediction Universe,简称 SPU
发起方UniPat AI
任务规模116 个科研任务,4207 组真实湿实验数据
覆盖领域化学、材料科学、生物学、医学
评测规则AI 拿到实验条件,自主检索文献、调用工具,预判湿实验结果,和线下实测结果比对打分
测试硬件环境单块 H20,单次评测限定 8 小时工作时长
核心结论单纯提升算力、拉长推理预算,模型预测能力提升微弱
参测主流模型Claude Opus 5.5、GPT-6 Astra 等前沿大模型
区别于普通榜单不是刷题、不是知识问答,全部对照真实实验室湿实验结果,没有标准答案可背

二、为什么算力翻 5 倍、推理拉满也很难提分

常规大模型的推理题、数学题、代码题,问题本身有固定逻辑,给更多算力、更多思考轮次,模型更容易找到正确路径。但湿实验预测受很多现实变量约束,分子反应、材料合成、生物表达里存在大量未完全探明的微观机制,还有温度、纯度、耗材批次、仪器误差这类噪声变量。

AI 就算查遍文献、反复思考,也很难只靠理论信息精准预判实验走向,它不是算力不够,是底层科学规律、实验噪声本身就很难被现有模型捕捉。所以测试里出现了一个反常识现象:给模型 5 倍算力、放开超长推理,预测准确率上涨幅度很小,没法靠堆资源直接 “刷分”。

三、SPU 基准的典型测试任务清单

  1. 化学反应优化:更换温度、溶剂、催化剂,预判哪一组条件目标产物收率更高;
  2. 抗体工程预测:给出不同抗体序列变体,预判哪一个变体表达量、稳定性更好;
  3. 材料性能预测:配方调整后,预判材料力学、导电、催化性能变化;
  4. 生物医学实验预判:细胞培养、给药条件变更,预判细胞活性、实验表型结果;
  5. 多条件对比排序:在多组平行实验方案里,按真实实验结果排序。

四、评测执行步骤

  1. 分配任务:给到 AI 实验背景、初始条件,不提供最终实验结果;
  2. 自主调研:AI 可以自主检索文献、调用计算工具,在 8 小时时限内完成推演;
  3. 提交预测:AI 输出对实验结果、产物收率、性能指标的判断;
  4. 盲评打分:用线下已经完成的真实湿实验数据作为标准答案,量化误差;
  5. 变量对照:同一模型分别使用基础算力、5 倍算力,短推理、超长推理模式做对照,观察分数变化。

五、优势和局限

✅ 优势

  • 贴近真实科研场景,避开现有榜单的刷题、数据泄露问题;
  • 可以用来区分 “会背文献的 AI” 和 “能预判真实实验的 AI”;
  • 给 AI for Science 提供一个更硬核的标尺,指导模型研发方向。
  • 评测成本高,依赖大量线下湿实验数据,数据集扩充速度慢;
  • 只评估预测能力,不评估 AI 设计实验、搭建实验方案的能力;
  • 目前所有顶尖模型得分都偏低,还没有模型达到可用的科研预测水平。

⚠️ 局限

六、行业启示

以后评估科研向大模型,不能只看数学、代码、文献问答跑分。在湿实验预测这个赛道,模型的核心瓶颈不是算力和推理长度,而是对复杂生化、材料底层机制的建模能力、对实验噪声的理解能力。未来 AI for Science 的优化重点,会偏向专用科学表征、物理化学先验嵌入,而不是简单堆算力。

【相关 FAQ】

问题 1:本次发布的 SPU 湿实验预测基准,为什么算力翻 5 倍、推理拉满效果也很差?

回答 1:SPU 湿实验预测基准对应的是真实生化、材料实验,实验存在大量未完全探明的微观机制和环境噪声,这类问题不是单纯靠增加算力、拉长推理时长就能解决,所以算力翻倍、推理拉满之后预测能力提升很有限。

问题 2:SPU 湿实验预测基准和普通大模型评测榜单最大区别是什么?

回答 2:SPU 湿实验预测基准不用选择题、理论问答题,全部以线下真实湿实验结果作为标准答案,考验 AI 预判真实实验产出的能力,普通榜单大多是理论题目,容易出现刷题、数据泄露。

问题 3:SPU 湿实验预测基准覆盖哪些科研方向?

回答 3:SPU 湿实验预测基准一共 116 项任务,4207 组湿实验,覆盖化学、材料科学、生物学、医学四大 AI for Science 主流方向。

问题 4:SPU 湿实验预测基准主要用来测哪些大模型,目前表现怎么样?

回答 4:SPU 湿实验预测基准测试了 Claude Opus 5.5、GPT-6 Astra 等前沿大模型,整体成绩都不理想,没有模型能稳定精准预测湿实验结果。

【参考资料】

[2026-11-14](“史上最严” 湿实验预测基准发布!推理拉满、算力翻 5 倍也白搭)36 氪

[2026-11-14](SPU 湿实验基准上线,AI for Science 迎来硬核新标尺)量子位

[2026-11-14](UniPat AI 发布 SPU 基准:真实湿实验预测,堆算力不再管用)新浪财经

[2026-11-14](SPU 基准详解:116 项科研任务,四千余组湿实验数据)机器之心

【免责声明】

本文仅为 SPU 湿实验预测基准资讯科普,基准评测结果、模型得分、任务范围以 UniPat AI 官方发布文档为准;AI 在科研场景的预测结果不能直接替代真实湿实验,科研实验必须由专业人员线下验证;本文不构成模型选型、科研项目投入建议。