bmad-eval
A skill from the BMAD Method that runs a skill's evaluations through the agent tool the user works in and reports the results.
O que a skill ensina
A skill from the BMAD Method that runs a skill's evaluations through the agent tool the user works in and reports the results. It has four modes: whether the skill beats the bare model on the same input, whether a stripped or earlier version does as well, whether output meets a named rubric with a grader subagent, and whether the skill's description triggers on the right queries. Each case runs in a clean temporary workspace outside the project, and bundled Python scripts run cases, test triggers, convert case files and summarise repeated runs. It refuses to invent cases, labels results from fewer than three runs a quick look, and suggests retiring a skill that no longer beats the baseline.
O que faz
- Compare a skill against the bare model
- Test whether a stripped version does as well
- Grade output against a rubric
- Check whether a skill description triggers correctly
Sobre
- Publicador
- BMad Code
- Ferramenta
- Testes
Instalação
O projeto não documenta passos de instalação que tenhamos conseguido confirmar. Veja as instruções do próprio projeto
O que tem dentro
- bmod.toml
- customize.toml
- evals/triggers.json
- references/description-optimization.md
- references/eval-format.md
- references/grader.md
- references/harness.md
- references/self-improvement.md
- scripts/aggregate_benchmark.py
- scripts/convert_cases.py
- scripts/eval_common.py
- scripts/run_evals.py
- scripts/run_triggers.py
- scripts/tests/fake_harness.py
- scripts/tests/test_aggregate_benchmark.py
- scripts/tests/test_convert_cases.py
- scripts/tests/test_eval_common.py
- scripts/tests/test_run_evals.py
- scripts/tests/test_run_triggers.py
Servidores MCP e skills podem executar código no seu computador e agir sobre os seus dados. Revise o código-fonte antes de instalar.
Esta skill inclui scripts que o seu agente pode executar.
Detalhes
| Fato | Valor | Fonte |
|---|---|---|
| Tipo | Skill | |
| Ferramenta | Testes | |
| Publicador | BMad Code | fonte |
| Status oficial | Não informado na documentação | |
| Exige chave de API ou login | Não informado na documentação | |
| Inclui scripts | Sim | fonte |
| Plataformas | Não informado na documentação | |
| Clientes de IA | Não informado na documentação | |
| Licença | MIT | fonte |
| Preço | Não informado na documentação | |
| Atividade | Último commit em 11 de nov. de 202655.252 estrelas no GitHubDados de download indisponíveis (não está no npm nem no PyPI) | fonte |
| Links | Repositório |
Mais de BMad Code
10 skills
- bmad-agent-pm (Skill)
- bmad-agent-po (Skill)
- bmad-brainstorming (Skill)
- bmad-build (Skill)
- bmad-deep-recon (Skill)
- bmad-toolsmith (Skill)
Também listado em: Testes
Fontes
- Arquivo da skill (SKILL.md)github.com/bmad-code-org/BMAD-METHOD16 de nov. de 2026
- Repositório no GitHubgithub.com/bmad-code-org/BMAD-METHOD · Comprova: Licença, Publicador16 de nov. de 2026
- Registro na API do GitHubgithub.com/bmad-code-org/BMAD-METHOD · Comprova: Inclui scripts16 de nov. de 2026
- Repositório no GitHubgithub.com/bmad-code-org/bmad-method · Comprova: Atividade11 de nov. de 2026
- Arquivo da skill (SKILL.md)github.com/bmad-code-org/BMAD-METHOD · Comprova: Licença10 de nov. de 2026
- Pasta no repositório (bmad-eval)github.com/bmad-code-org/BMAD-METHOD · Comprova: Inclui scripts10 de nov. de 2026