智能体工具链感知：把可验证遥测转化为工具调用型智能体的运行控制
本文目录
arXiv:2611.05391 (cs)
[Submitted on 13 Sep 2026]
作者：Manu Agrawal、Shrey Nagpal
摘要#
工具描述会告诉智能体一个动作能做什么，却不一定揭示该动作在使用当下是否健康或是否合适。执行工具链（execution harness）常常通过监控器、追踪记录和近期失败掌握这些信息，而选择下一个动作的模型却不掌握。我们把这一差距称为运行盲区（operational blindness）。我们提出智能体工具链感知（Agent Harness Awareness），这是一种信任分离（trust-separated）的设计：在发生重要动作之前，由宿主（host）提供一份小而新鲜、经验证的状态快照，同时保留测量、强制执行、评估和最终派发的权限。我们用 ToolRoute 测试其在「工具与网络」场景下的实例——这是一个受控隔离基准，保持任务与候选语义不变，只改变模型可获得的运行信息。在一项覆盖 GPT-5.6 Sol、Claude Sonnet 5 和 Gemini 3.7 Flash 的 216 次决策消融实验中，经验证的工具健康状态相比同形态的中性对照，把平均可观测策略遗憾（observable policy regret）降低了 96.9%（从 4,252 毫秒降至 131 毫秒），并把单次派发完成率从 69.4% 提升到 95.8%。在另一项包含 27 次决策的端到端复现实验中，使用本地实时 TCP/HTTP 执行、OpenTelemetry 客户端跨度（span）以及 Toxiproxy 注入故障，经验证的状态把平均遗憾从 8,956 毫秒降至 0 毫秒（零额外可观测运行成本），并在 9/9 的「模型 × 故障」组合中完成实时动作，而中性对照为 5/9。这些研究确立了智能体工具链感知的「工具与网络」实例：经过选择的宿主遥测能实质性改善派发前的运行决策。运行时状态、硬件压力、经济性、重试感知的恢复以及异构选择，仍是同一架构下有待实证扩展的开放问题。
评论：9 页，3 幅图
主题：人工智能（cs.AI）；计算与语言（cs.CL）
引用：arXiv:2611.05391 [cs.AI]（或 arXiv:2611.05391v1 [cs.AI] 引自本版本）
https://doi.org/10.48550/arXiv.2611.05391
提交历史#
来自：Manu Agrawal [查看电子邮件]
- [v1] Sun, 13 Sep 2026 15:01:55 UTC (94 KB)