OpenAI推出MedChemBench,使用99道题评估模型从分子结构、实验结果到候选化合物筛选和性质预测的药物化学推理。基准涵盖117篇论文与专利、761种分子;它评估历史材料推理,不证明模型能发现新药或改善实验决策。 ...
|
OpenAI 于 11 月 20 日发布 MedChemBench,用于评估 AI 模型在药物化学研究中的若干能力:从结构图还原分子、结合实验结果解释证据、比较并筛选候选化合物,以及预测分子性质。 基准包含 99 道题,来源覆盖 117 篇论文和专利、761 种分子结构。题目会给模型研究阶段已有的信息,再看它能否据此推理后续实验可能呈现的结果。OpenAI 举例说明,同类化合物可能在靶点活性、细胞通透性和代谢稳定性之间存在取舍,因此单看某一个指标并不足以决定下一步该测什么。 这项基准测的是模型对历史研究材料的推理,不代表模型已经能够发现新药或改善实验决策。OpenAI 也提醒,模型可能接触过公开来源;评测没有使用工具、反馈或新实验。它更适合帮助研究者定位模型在哪些环节表现较好、哪些环节仍需验证。 |
0