正在整理你需要的资料…
jwuthri-cloud/Tracely-ai ↗ · 项目主页 ↗
线上炸过的问题,回归测试里往往没有。Tracely 以 trace 为原生数据,按 OTLP 收进线上链路,逐条打分、把失败聚成 issue、冻成可重放用例,在 PR 上拦下复现的改动。后端 Postgres+pgvector、ClickHouse、Redis、MinIO、FastAPI,前端 Next.js。
适合已经在跑 Agent、又被线上失败反复咬的团队——它把「上线后炸了」变成「PR 被拦下」;自托管门槛不低,ClickHouse 的存储与索引设计要按自己的量级调。
下面是把仓库 README 逐节读完后归纳出的中文要点。
面向 AI agent 的链路原生 CI/CD:每条 trace 落库即被评分,失败被聚成 issue 并冻结成可重放用例,CI 会拦截可能再次引入问题的合并请求,并及时发出告警
可观测性通常止步于看板,能看出 agent 坏了却接不上后续;本工具把生产上真实失败的那次 trace 直接冻结成回归用例,不需要人工编写数据集
trace 通过 OTLP 接入,agent 语义字段被提升为独立索引列,瀑布图展示 agent 到思考、技能、生成与交接的链路并标红失败段,评估器作为 trace 表的列实时给出评分
包含 OTLP 摄入、评估器、失败聚类、回归用例、场景、CI 门禁、告警、趋势分析、评估器校准、会话智能、内置助手与 MCP 服务端等模块
前置是 Docker 与 Docker Compose,本地开发还需 uv 和 Node 20 以上;一键起 ClickHouse、Postgres、Redis 与 MinIO 并跑完迁移,端口默认 web 3001、backend 8000
启动时初始化一次并包裹运行即可自动采集 provider 调用,生成含模型、消息、token、时延、工具调用与成本的 GENERATION span,也可以任意 OTLP/HTTP 导出器上报
pip install "tracelyai-sdk[openai]" # or [anthropic], [langchain], [all]| 主要语言 | Python | 许可 | MIT |
|---|---|---|---|
| 创建时间 | 2026-10-11 | 最近提交 | 2026-11-08 |
| 站内采集 | 2026-11-06 起,连续观察 4 天 | 最近一次 | 2026-11-09 |
最近 4 次采集
2026-11-06 1,041 ★ → 2026-11-09 946 ★ (累计 -95)
数据来自 GitHub 公开接口的每日采集快照,star 数为采集当时读到的值, 与 GitHub 页面上显示的实时数字可能有几分钟的差距。 项目名点击可回到 本页。