评估与改进面向测序协议理解的 AI 智能体

作者：Chi-Lam Poon、Michael Goneos、Zezheng Song、Xi Chen

arXiv：2610.37851（cs） · 提交于 2026 年 10 月 27 日

摘要#

现有的科学智能体基准很少评估智能体能否准确重建测序协议（sequencing protocol）所指定的分子结构与生成工作流——而这一能力对于分析定制的测序检测至关重要。我们提出 LibStructBench，一个以文档为依据、用于重建测序文库结构与分子工作流的基准。实验表明，前沿智能体往往能给出大致正确的重建，但在精确重建上仍不可靠，尤其是在分子状态表示和工作流连接性方面。更换底层语言模型带来的平均性能差异，大于更换智能体框架（agent harness）带来的差异，且仅在分子状态重建上具有统计显著性。额外知识在小型试点中提高了寡核苷酸家族（oligo-family）的恢复率，但没有提高分子工作流的平均得分。程序性规则与跨协议示例的自主积累，在测试轨迹中表现出非单调的验证性能，并且在留出的分子工作流上平均没有提升。这些发现突显了：对于复杂实验协议中分子过程的科学推理，需要更受控且可验证的方法。

论文信息#

• 主题：人工智能（cs.AI）；基因组学（q-bio.GN）
• 引用格式：arXiv:2610.37851 [cs.AI]
• DOI：https://doi.org/10.48550/arXiv.2610.37851

提交历史#

• 提交者：Chi-Lam Poon
• [v1] 2026 年 10 月 27 日星期二 18:58:58 UTC（554 KB）