AI导航

OpenAI发布MedChemBench基准:99道药物化学题,GPT-6.2拿84.5%仍有短板

AI资讯
2 min read
1 次阅读

2026年11月20日,OpenAI发布药物化学基准MedChemBench,用99道来自真实论文与专利的题目,考模型会不会像药物化学家一样思考。GPT-6.2 Astra在xhigh推理档位下拿到84.5%的可用分,领先GPT-6 Astra的83.3%,但分数分布比总分更值得看:模型重建分子结构几乎满分,挑候选化合物、预测数值时只拿到一半左右的分。OpenAI自己也划了界线:这只能说明模型读得懂历史数据,不能证明它能发现新药。

99道题到底考什么

MedChemBench的99道题来自117篇论文与专利,涉及761个不同的分子结构,覆盖七个类别,只做临床前药物发现,不碰临床开发。它考四项能力:按图纸与化学基团拼出正确的分子结构,包括原子连接与立体化学;用实验数据解释结果、说明为什么选这个而不是那个;按要求给化合物排序、挑出候选;预测与文献一致的数值与类别,如效力、毒性与吸收代谢。比如其中一道题取自PRMT5抑制剂研究,这是癌症药物发现盯上的一个蛋白靶点。模型等于在复盘别人已经做过的药物化学判断。

分数拆开看:结构近满分,选药掉链子

同一档位下,GPT-6.2 Astra拿84.5%,GPT-6 Astra拿83.3%,GPT-6.1 Sol拿82.0%,GPT-5.6 Sol只有58.2%,最大的差距在最后一档拉开。拆到单项看得更清楚:GPT-6 Astra重建分子结构拿了95.4%的分,科学解释拿到91%,可化合物排序与选择只有约50%,数值预测约47%。也就是说,模型很擅长看懂结构图并讲清道理,到了拍板下一个该试哪个化合物、数值大概是多少时,可靠性掉了一半。OpenAI还提醒了三个前提:题目来自已发表文献,不能排除模型见过原文;每次回答都是一次尝试,没有工具、反馈与新实验;开放式设计题的判分仍依赖参考答案。

这套基准给谁用、边界在哪

对药企与科研团队来说,MedChemBench的价值不在排行榜名次,而在定位短板:结构理解与解释已经能用,选品与数值预测还得人来把关。对普通读者,它是读AI制药新闻的标尺:下次再看到AI设计出候选药,先问结构对不对、为什么选它、数值准不准,三项是否都经过湿实验验证。基准本身不评价临床价值,也不承诺任何分子能成药。

下一步看三点:这套题会不会被其他实验室采用、模型在选品与预测上的分数会不会追上来、OpenAI何时更新题目防刷榜。

推荐工具

NVIDIA Chat with RTX AI聊天 Chat with RTX 是 NVIDIA 面向 RTX 电脑的本地 AI 聊天工具,可围绕本地文档和视频资料做问答,适合重视隐私、离线检索并具备硬件条件的用户更适合资料不便上传云 弱鸡AI AI视频 低价AI视频生成聚合平台,seedance2.0,seedance2.5,minimax h3,wan,muse等视频生成模型,支持在线创作与 API 接入。 HuggingChat AI聊天 HuggingChat 是 Hugging Face 的开源模型聊天应用,支持 Omni 自动选模型,也可手动选社区开放模型对话。它适合体验开源模型、技术探索和问答,结果可能不稳定,重要内容需复核。 纳米AI搜索 AI搜索 纳米AI 是 360 旗下 AI 搜索和智能体入口,支持文字、语音、拍照提问、多模型协作与内容创作,适合中文用户做日常搜索、学习问答、移动查询、热点追踪、生活决策、知识整理和轻量创作。 Qwen Chat(通义千问) AI聊天 Qwen Chat 是Qwen 大模型聊天助手,支持Qwen 模型聊天、写作和编程问答,适合中文用户和开发者完成 AI 对话、资料问答和任务协作,适合上线前核对权限、成本和资料质量。 DuckDuckGo AI Chat AI聊天 DuckDuckGo AI Chat 适合重视隐私的普通用户使用,围绕隐私 AI 聊天、免账户使用和多模型问答提供对话式 AI 支持和任务协作能力,适合上线前核对权限、成本和资料质量。