在人工智能领域，Agent（智能体）正从单纯的聊天机器人进化为能够自主规划、调用工具并完成复杂任务的系统。为了准确衡量一个 Agent 的优劣，业界通常从以下六个核心维度进行全面评估。
以下是关于 Agent 评估六个维度 的详细分析：
构建与衡量：AI Agent 评估的六个核心维度
随着大语言模型（LLM）能力的增强，Agent 已经成为落地 AI 应用的关键。不同于传统的模型评测，Agent 的评估更加侧重于"在复杂环境中的行动效果"。要评估一个 Agent 是否真正"好用"，我们需要从以下六个维度展开：
1. 任务完成度 (Task Success Rate)
这是最直观的维度。它评估 Agent 是否最终达成了用户预设的目标。
- 评估指标： 成功率（SR）、任务达成时间。
- 核心逻辑： 无论中间过程如何，Agent 是否在给定的约束条件下（如步数限制、时间限制）完成了任务？对于多步骤任务，还会细分为"步骤成功率"和"整体任务成功率"。
2. 规划与逻辑能力 (Planning and Reasoning)
Agent 的核心在于它如何将复杂问题拆解为子任务，并在遇到阻碍时调整策略。
- 评估指标： 逻辑一致性、回溯次数、自我纠错能力。
- 核心逻辑： 优秀的 Agent 应该展现出清晰的逻辑链条（如 Chain-of-Thought）。当第一条路走不通时，它能否根据环境反馈（Observation）自动纠正后续步骤（Self-Reflection），而不是陷入死循环。
3. 工具使用准确性 (Tool Use & API Invocation)
Agent 区别于 LLM 的关键在于它有"手"。它必须学会何时调用工具、如何生成正确的参数。
- 评估指标： 工具调用准确率、参数错误率、幻觉率。
- 核心逻辑： 评估 Agent 能否在数十个可选 API 中识别出最合适的工具，并准确填充 JSON 参数。它是否会在不该用工具的时候盲目调用？调用失败后是否具备重试和修复能力？
4. 记忆管理能力 (Memory Context Management)
Agent 需要在多轮交互中保持状态，并从历史经验中提取有效信息。
- 评估指标： 上下文保持度、长短期记忆提取精度。
- 核心逻辑： 评估 Agent 如何处理信息的存取。它能否在任务进行到第 20 步时，依然记得第 1 步中用户的核心约束？能否有效地利用向量数据库（RAG）检索相关知识而不引入干扰噪声？
5. 鲁棒性与可靠性 (Robustness and Reliability)
在现实世界中，输入往往是模糊或带有干扰的。
- 评估指标： 异常处理成功率、抗干扰能力。
- 核心逻辑： 当用户输入含糊不清、网络波动导致 API 报错、或者环境返回了无关信息时，Agent 是直接崩溃报错，还是能平稳退化（Graceful Degradation）并尝试引导用户给出更多指令？
6. 效率与成本 (Efficiency and Cost)
从商业化和工程化的角度看，Agent 必须在合理的预算内完成任务。
- 评估指标： Token 消耗量、任务响应延迟、推理步数。
- 核心逻辑： 如果一个 Agent 为了完成一个简单的订票任务循环调用了 50 次模型，消耗了数万 Token，即使任务成功，其效率维度也是不及格的。评估需权衡"能力提升"与"资源消耗"之间的收益比。
总结
对 Agent 的评估正在从**"看它说得对不对"转向"看它做得好不好"**。
这六个维度构成了一个闭环：规划 决定了路径，工具调用 实现了行动，记忆 提供了背景，鲁棒性 提供了保障，而任务完成度 和效率则是衡量最终商业价值的终极标准。在实际开发中，开发者应根据应用场景（如代码生成、自动化运维、个人助理）为这六个维度设定不同的权重。