launchdarkly-online-evals
A partner-maintained skill for AWS DevOps Agent, from LaunchDarkly, for automatic quality scoring of AI config output in LaunchDarkly using judges, where one model rates another.
O que a skill ensina
A partner-maintained skill for AWS DevOps Agent, from LaunchDarkly, for automatic quality scoring of AI config output in LaunchDarkly using judges, where one model rates another. It covers the built-in judges, creating custom judges, attaching them to config variations, setting sampling rates and watching quality scores, and notes that judges work only in completion mode. It needs the hosted LaunchDarkly MCP server, and SDK examples use the Python and Node.js AI SDKs.
O que faz
- Attach judges to AI config variations
- Create custom judges
- Set evaluation sampling rates
- Monitor quality scores
Sobre
- Publicador
- Amazon Web Services
- Ferramenta
- Amazon Web Services
Instalação
O que tem dentro
- CHANGELOG.md
- README.md
- evals/exemptions.json
Servidores MCP e skills podem executar código no seu computador e agir sobre os seus dados. Revise o código-fonte antes de instalar.
Detalhes
| Fato | Valor | Fonte |
|---|---|---|
| Tipo | Skill | |
| Ferramenta | Amazon Web Services | |
| Publicador | Amazon Web Services | fonte |
| Status oficial | Oficialin the aws GitHub organisation; README presents it as tools for AWS DevOps Agent and links AWS docs; this skill is maintained by a partner (tier partner-managed) | fonte |
| Exige chave de API ou login | Não informado na documentação | |
| Inclui scripts | Não | fonte |
| Plataformas | Não informado na documentação | |
| Clientes de IA | Não informado na documentação | |
| Licença | Apache-2.0 | fonte |
| Preço | Não informado na documentação | |
| Atividade | Último commit em 19 de nov. de 2026143 estrelas no GitHubDados de download indisponíveis (não está no npm nem no PyPI) | |
| Links | Repositório Site |
Mais de Amazon Web Services
4 servidores · 170 skills
- analyzing-release-readiness (Skill)
- Amazon ECS MCP Server (Servidor MCP)
- Agent Toolkit for AWS (Servidor MCP)
- chatting-with-aws-devops-agent (Skill)
- coordinating-multi-space-devops-agent (Skill)
- diff-scanning-with-aws-security-agent (Skill)
Fontes
- Arquivo da skill (SKILL.md)github.com/aws/tools-for-devops-agent13 de nov. de 2026
- Arquivo no repositório (getting-started.md)github.com/aws/tools-for-devops-agent13 de nov. de 2026
- Arquivo de licença (LICENSE)github.com/aws/tools-for-devops-agent · Comprova: Licença13 de nov. de 2026
- README (README.md)github.com/aws/tools-for-devops-agent · Comprova: Status oficial13 de nov. de 2026
- Arquivo no repositório (NOTICE)github.com/aws/tools-for-devops-agent · Comprova: Publicador13 de nov. de 2026
- Pasta no repositório (launchdarkly-online-evals)github.com/aws/tools-for-devops-agent · Comprova: Inclui scripts13 de nov. de 2026
Outros servidores MCP e skills para Amazon Web Services
- AWS Documentation MCP Server(Servidor MCP)
- awslabs.amazon-mq-mcp-server(Servidor MCP)
- awslabs.amazon-sns-sqs-mcp-server(Servidor MCP)
- awslabs.amazon-translate-mcp-server(Servidor MCP)
- awslabs.aws-iac-mcp-server(Servidor MCP)
- awslabs.aws-location-mcp-server(Servidor MCP)
- awslabs.aws-pricing-mcp-server(Servidor MCP)
- analyzing-release-readiness(Skill)
- Ver tudo →