hillclimb-skill
A skill from Caliper, a tool for evaluating agent skills, that improves an existing SKILL.md against its evaluation one change per round. It needs an evaluation with at least eight tasks.
O que a skill ensina
A skill from Caliper, a tool for evaluating agent skills, that improves an existing SKILL.md against its evaluation one change per round. It needs an evaluation with at least eight tasks. After asking for the goal (a higher score or fewer tokens), the part to change, the smallest gain worth keeping and a round budget, it runs a baseline twice to measure noise and holds out a third of the tasks. Each round reads failures from the remaining tasks, makes the smallest general fix and keeps it only if the held-out tasks improve too. It finishes by restoring the highest-scoring version on held-out tasks, comparing it with the baseline, and leaving the edits uncommitted.
O que faz
- Measure an evaluation's noise floor
- Split tasks into training and held-out sets
- Make and test one skill change per round
- Report held-out results against the baseline
Sobre
- Publicador
- Emrick Donadei
- Ferramenta
- Testes
Funciona com
Instalação
- Execute este comando para adicionar ao Qualquer cliente:
npx skills@latest add edonadei/caliper
O que tem dentro
- REFERENCE.md
- climb.py
- hillclimb-skill.eval.yaml
Servidores MCP e skills podem executar código no seu computador e agir sobre os seus dados. Revise o código-fonte antes de instalar.
Esta skill inclui scripts que o seu agente pode executar.
Detalhes
| Fato | Valor | Fonte |
|---|---|---|
| Tipo | Skill | |
| Ferramenta | Testes | |
| Publicador | Emrick Donadei | fonte |
| Status oficial | Não informado na documentação | |
| Exige chave de API ou login | Não informado na documentação | |
| Inclui scripts | Sim | fonte |
| Plataformas | Não informado na documentação | |
| Clientes de IA | Claude Code, Codex | fonte |
| Licença | MIT | fonte |
| Preço | Não informado na documentação | |
| Atividade | Último commit em 17 de nov. de 2026234 estrelas no GitHubDados de download indisponíveis (não está no npm nem no PyPI) | fonte |
| Links | Repositório Site |
Também listado em: Testes
Fontes
- Repositório no GitHubgithub.com/edonadei/caliper · Comprova: Clientes de IA, Licença, Publicador, Atividade11 de nov. de 2026
- Arquivo da skill (SKILL.md)github.com/edonadei/caliper15 de nov. de 2026
- Pasta no repositório (hillclimb-skill)github.com/edonadei/caliper · Comprova: Inclui scripts15 de nov. de 2026