GPT-6 Astra生物评测66.7%居首:100项湿实验室任务仍会算错菌落
2026年11月6日,OpenAI联合酶设计公司Ligo发布BioBasicsBench,这是一个包含100项湿实验室任务的评测基准,使用真实实验原始数据而非论文精修图。七个模型参与测试,GPT-6 Astra以xhigh推理设定下66.7%的平均得分居首,但OpenAI自己也承认,这一分数不意味着模型已能在实验室做出
2026年11月6日,OpenAI与酶设计公司Ligo共同推出BioBasicsBench。这套AI评测基准覆盖100项湿实验室日常任务,七个模型参与测试。在最高推理设定(xhigh)下,GPT-6 Astra的平均部分得分为66.7%,位列所有参测模型之首;得分最低的GPT-5.2只有31.2%,两者差距超过一倍。就公开范围而言,这是目前规模最大、来源最接近真实实验室环境的生物科学AI评测之一。
BioBasicsBench的核心设计取向与主流学术型科学基准明显不同。现有生物学评测大多依赖整理过的论文附图、教科书插图或已有答案的选择题,这份基准用的却是实验室科学家从自己实验中产生的原始证据——凝胶和印迹图像、培养板照片、显微镜堆叠图像、测序读取结果、酶标仪导出文件,以及实际台面操作的视频片段。
五个领域,三轮审核,19道"无法判断"题
100项任务分布在五个领域:蛋白质方法25题、成像与细胞计量23题、定量与检测19题、核酸方法17题、分子克隆16题。每道题都由Ligo的科学家依据自己的实验数据设计,配有专家撰写的评分细则,并依次经过三轮审核:先由一名未参与题目创作的Ligo内部科学家初审,再由一名实验室在职湿实验PhD外审,最后经内部终审。根据kingy.ai的分析,OpenAI报告的模型得分尚未经过外部第三方独立复现。
评分采用部分得分制,答对结论但量化数字有误,与结论和数字都答错,拿到的分并不相同。另外,100题里有19题专门测试模型能否识别"证据不足以作出判断"的情形。
七个模型的分层结果
GPT-6 Astra:66.7%(95%置信区间 60.3–73.1%),每任务输出4,704个token- GPT-6.1 Sol:62.0%(55.6–68.4%),每任务5,238个token
- GPT-5.6 Sol:43.8%(37.6–50.0%),每任务9,099个token
- GPT-6 Luna:38.3%(32.3–44.5%),每任务13,120个token
- GPT-5.5:35.4%(29.7–41.0%),每任务11,135个token
- GPT-5.4:33.2%(28.3–38.4%),每任务13,717个token
- GPT-5.2:31.2%(26.2–36.3%),每任务27,620个token
从GPT-5.6 Sol的43.8%到GPT-6 Astra的66.7%,提升了约23个百分点,是整个测试序列中最大的一次跨代跃升;相比之下,GPT-5系列内部从GPT-5.2到GPT-5.6 Sol也只提升了约12个百分点。照此看,GPT-6架构对图像推理能力的提升带有结构性,并非参数量线性扩展所能解释。
每任务token消耗上,GPT-6 Astra为4,704个,GPT-5.4和GPT-5.2则分别达到13,717个和27,620个,后者接近前者的六倍,得分却只有33.2%和31.2%。据cellcog.ai的分析,OpenAI把GPT-6 Astra的token效率归因于更强的原生图像读取能力:模型可以直接从图像中提取信息,不必靠大量文字推导去填补视觉理解上的缺口。
GPT-6 Astra在哪里做对了,又在哪里出错
cellcog.ai的分析梳理了OpenAI在发布报告中披露的具体案例。成功的一面是,GPT-6 Astra认出了一块被标注为错误抗生素的对照培养板,还发现了Sol把重叠荧光通道误判为死细胞的错误。
同一批测试中也有失手的时候。在克隆凝胶任务里,GPT-6 Astra挑错了菌落,还把一块培养板的菌落数量多计了约12%。
OpenAI在发布报告中明确写道:"更高的基准分数目前还不意味着模型能在实验室中做出可靠的判断。"
谁需要这份基准,它填补了什么空缺
对生命科学企业的采购和研发团队来说,BioBasicsBench给出了一个此前不存在的参照系。在这之前,AI供应商向实验室用户展示的往往是大模型能力的通用基准,比如MMLU生物学子集、GPQA等,而这些基准的评测场景离真实实验室操作相当远。
对AI研发团队来说,这份基准指出了一个具体的技术方向:在湿实验室任务中,token效率与图像推理能力的关联,比模型参数量更能预测实际表现。GPT-5系列里,GPT-5.2消耗的token接近GPT-6 Astra的六倍,拿到的分数却不到后者的一半。
从竞争格局看,这份基准的发布相当于OpenAI在生命科学AI赛道上立了一个对话坐标。Google DeepMind的AlphaFold系列在蛋白质结构预测上的领先地位广为人知,但蛋白质结构预测属于相对封闭、输入输出格式高度标准化的任务;BioBasicsBench测的则是实验室日常操作中非结构化证据的解读能力。目前公开数据里,还没有Google、Anthropic或其他主要AI公司在BioBasicsBench上的测试结果。
开发者和企业用户的可执行结论
打算把AI代理引入实验室流程的团队,可以从这份基准里找到几个具体做法。BioBasicsBench里有19道“证据不足”识别题,这类能力恰好对应实际部署中最该防的环节,选型测试时拿这些题去考候选模型,比看总分更有意义。另外,各任务领域的得分分布眼下没有完整公开——总分和置信区间有了,分领域细目还没放出来;采购时应当要求供应商给出与自己业务领域(比如成像、核酸)对应的分项分数,别只盯平均分。
还有一点,BioBasicsBench公开了token消耗数据,token消耗偏高,往往说明模型在视觉理解上存在短板。