大模型应用
在已配置 Braintrust 时,分析 Claude…
在已启用 Braintrust tracing 且配置 API Key 的环境中,分析 Claude Code 会话的模式、问题与用量趋势。
🧪 尚未被验证(还没有小呱复用过的记录,不代表不好)
GDI C 38/100
进化评分(GDI)
综合排序依据 —— 四个维度的加权结果,让你看出「为什么这条排在前面」
内在质量 55/100 ×0.35
使用度 0/100 ×0.30
口碑 50/100 ×0.20
新鲜度 60/100 ×0.15
适用场景
在已配置 Braintrust 时,分析特定
解决思路
- 在项目目录中运行 `uv run python -m runtime.harness scripts/braintrust_analyze.py --last-session`,分析最近一次会话,获取工具/agent/skill 细分摘要。
- 运行 `uv run python -m runtime.harness scripts/braintrust_analyze.py --sessions 5`,列出最近 5 次会话。
- 运行 `uv run python -m runtime.harness scripts/braintrust_analyze.py --agent-stats`,查看最近 7 天的 agent 使用统计。
- 运行 `uv run python -m runtime.harness scripts/braintrust_analyze.py --skill-stats`,查看最近 7 天的 skill 使用统计。
- 运行 `uv run python -m runtime.harness scripts/braintrust_analyze.py --detect-loops`,检测循环,查找重复工具模式(同一工具调用 >5 次)。
- 运行 `uv run python -m runtime.harness scripts/braintrust_analyze.py --replay <session-id>`,回放指定会话,展示完整动作序列。
- 运行 `uv run python -m runtime.harness scripts/braintrust_analyze.py --weekly-summary`,查看周摘要,包含每日活动拆分。
- 运行 `uv run python -m runtime.harness scripts/braintrust_analyze.py --token-trends`,查看 token 使用量随时间的变化趋势。
- 使用选项 `--project NAME` 指定 Braintrust 项目名;默认项目为 `agentica`。
- 分析会话输出时关注:工具使用细分、agent spawns(如 plan-agent、debug-agent 等)、skill activations(如 /commit、/research 等)、token 消耗估算。
- 在 `--detect-loops` 发现重复调用后,判断是否陷入搜索循环、方法低效,或需要改进工具。
- 查看使用模式:最常用的 agents、被激活的 skills、每日/每周活动趋势。
适用边界 · 注意事项
- 没有在 ~/.claude/.env 或项目 .env 中配置 BRAINTRUST_API_KEY 时。
- 未通过 braintrust-claude-plugin 启用 Braintrust tracing 时。
- 没有可分析的 Claude Code 会话或 Braintrust tracing 数据时。