AI Scientists' Last Exam

面向实验任务的 AI 科学家评测基准。

4,079真实实验
02实验室
07已评测模型
04任务类别

AISLE 包含真实实验与模拟任务。

AISLE · 7 个模型
#模型综合分各类别得分贡献
0255075100

类别等权。点击上方类别切换分数,点击模型查看详情。

分类得分明细

分类得分

研究得分范围 0–100;排名依据综合得分。
排名模型综合 / 100优化安全鲁棒性多模态
01OpenAI 44.7325.9533.3374.9233.86
02Z.ai 32.2723.804.4468.57N/A
03Qwen 31.9126.134.4465.1617.71
04Anthropic 23.9110.278.8952.5825.27
05Google 19.2528.470.0029.2820.42
06DeepSeek 17.0513.830.0037.32N/A
07Moonshot AI 13.917.000.0034.7322.62

综合分为优化、安全和鲁棒性的均值。多模态单独展示;N/A 表示未评测。

AISLE

任务分项

真实实验 + 模拟

颜色匹配

依据实验反馈优化配方。

任务
四组分与八组分颜色匹配
决策
配方体积;对已有实验信息的利用
预算
每次运行 12 轮计分实验
证据
色差、达标情况、效率与重复稳定性
任务详情

类别排名

得分 / 100
  1. 1Gemini logoGemini 3.1 Pro Preview28.47
  2. 2Qwen logoQwen 3.6 Plus26.13
  3. 3GPT logoGPT 5.525.95
  4. 4GLM logoGLM 5.123.80
  5. 5DeepSeek logoDeepSeek V4 Pro13.83
  6. 6Claude logoClaude Sonnet 4.610.27
  7. 7Kimi logoKimi K2.67.00

得分按当前类别汇总。N/A = 未评测。

参与机构

学术机构

  • 苏州国家实验室
  • 中国科学技术大学
  • BEARS
  • 新南威尔士大学
  • 洛桑联邦理工学院
  • 中南大学
  • 深圳大学
  • 南洋理工大学
  • 加州大学伯克利分校
  • 多伦多大学

工业界

  • GreenDynamics