AgentOps
简介
Agent 可观测性平台：一行代码接入，自动记录每次 LLM 调用、工具执行与成本，支持会话回放、评测与告警，是 Agent 版的「APM」。
English
Agent observability: one line to instrument every LLM call, tool execution and cost, with session replay, evals and alerts — an APM for agents.
适用场景
- Agent 上线后出问题无法复现定位
- 需要按会话统计 token 成本
- 要做回归评测防止提示词改坏
快速上手
- pip install agentops，拿 API key 初始化
- 在框架入口加 agentops.init() 即自动埋点
- 仪表盘按 session 回放定位失败步骤
- 配置告警阈值监控成本与失败率
标签
相关资源
Composio
面向 Agent 的工具集成平台：250+ 应用（GitHub、Slack、Notion 等）的开箱即用工具与鉴权管理，支持 MCP 输出。Tool integration platform for agents: 250+ ready-made app tools (GitHub, Slack, Notion...) with auth management and MCP support.
Browser Use
让 AI Agent 直接「使用浏览器」的 Python 库：视觉+DOM 双通道理解页面，网页操作任务成功率业界领先。Python library that lets agents drive a browser visually and via DOM — state-of-the-art on web task benchmarks.
Langfuse 精选
开源 LLM 工程可观测平台：链路追踪、成本统计、Prompt 版本管理、数据集与自动评测，Agent 上线后必备的「仪表盘」。Open-source LLM observability: tracing, cost tracking, prompt versioning, datasets and automated evals.