开源 LLM 工程平台:追踪、评测、提示词管理与指标。
AgentOps
Python SDK for AI agent monitoring, LLM cost tracking, benchmarking, and more. Integrates with most LLMs and agent frameworks including CrewAI, Agno, OpenAI Agents SDK, Langchain, Autogen, AG2, and CamelAI
- 仓库
- AgentOps-AI/agentops
- Stars
- ★ 5,883
- Forks
- 643
- 最近更新
- 2026-06-25
- 访问次数
- 0
AgentLangChain
同类项目
测试提示词、模型与 RAG 的评测与红队工具,CLI 与 CI 友好。
大模型少样本评测框架,Open LLM Leaderboard 背后的工具。
Open-source AI penetration testing tool to find and fix your app’s vulnerabilities.
用众多可复用的提示词模式增强人类能力的开源框架。
An AI prompt optimizer for writing better prompts and getting better AI results.