确定需要追踪的 Agent、模型、工具与下游服务,优先覆盖语义边界(Agent 入口、LLM 调用、工具调用、Agent 间调用),避免在循环内部等低价值位置产生 Span 噪声。
根据技术栈选择自动插桩、手动插桩或兼容 SDK 接入,同一条链路可混用。可基于腾讯云 Agent 可观测平台快速落地,该产品以 Agent 全链路追踪、Agent 评估实验、Agent 持续优化为核心能力:调用链追踪完整记录每一步的节点输入、输出、耗时与 Token 消耗,支持逐层展开;会话回放以 Session 为单位还原多轮对话与 Tool Call 交互;智能洞察支持以自然语言提问发起分析并输出优化建议;成本与性能监控按 Agent、模型、用户多维下钻;Agent 评估围绕准确率、工具调用正确率、任务完成率量化质量,结合人工标注形成质量管理体系;持续进化将评估结果沉淀为标注数据集,驱动 Prompt 与模型迭代,形成"观测—评估—优化"闭环。平台兼容 OpenTelemetry 协议,适用于 Agent 运维、运营分析、安全审计与评估优化等场景。
配置 OTLP 上报与 Collector,处理层执行脱敏、采样与多后端路由,确保采集链路不阻塞业务关键路径。
初期建议全量采集以建立基线,稳定后切换尾采样;设定留存分层与关键告警(循环过多、工具成功率骤降、Token 超阈值、延迟 p99 超阈值等)。
启用会话分析、Token 成本、性能度量与 LLM-as-Judge 评估,形成"观测—优化—验证"的持续闭环。