スキル公式
agent-observability-experiment-bootstrap
MIT2026年11月9日 更新185GitHubスター
プロジェクト用に、すぐに実行できるLLM Observabilityの実験ファイルを書くDatadogのスキルです。
スキルの内容
プロジェクト用に、すぐに実行できるLLM Observabilityの実験ファイルを書くDatadogのスキルです。エージェントは、実験の目的、データセット(インラインのレコード、ローカルファイル、名前付きのDatadogデータセットのいずれか)、テスト対象のタスク、評価器(エバリュエーター)を決め、デフォルトのPythonのddtrace SDK、またはNodeのdd-trace SDKを使ったスクリプトかノートブックを作成し、ローカルで確認してから報告します。言語別のガイダンスとテンプレートはreferencesフォルダにあり、選んだSDKのものだけが読み込まれます。結果を記録するにはDatadogの認証情報が必要です。
できること
- LLM実験のスクリプトまたはノートブックの生成
- Pythonのddtrace SDKまたはNodeのdd-trace SDKの使用
- インライン、ローカル、Datadogでホストされたデータセットの組み込み
- コードベースまたはLLMジャッジの評価器の追加
概要
- 公開元
- Datadog
- ツール
- Datadog
インストール
含まれるファイル
- references/node/nodejs.md
- references/python/env_setup_template.py
- references/python/evaluator-styles/class.md
- references/python/evaluator-styles/function.md
- references/python/evaluator-styles/remote.md
- references/python/providers/anthropic.md
- references/python/providers/bedrock.md
- references/python/providers/gemini.md
- references/python/providers/langchain.md
- references/python/providers/litellm.md
- references/python/providers/llamaindex.md
- references/python/providers/openai.md
- references/python/python.md
MCPサーバーやスキルは、お使いのコンピューターでコードを実行したり、データを操作したりできます。インストールする前にソースを確認してください。
詳細
Datadogのほかの掲載
サーバー2件 · スキル70件
- agent-observability-auto-experiment (スキル)
- agent-observability-build-eval-from-annotations (スキル)
- agent-observability-eval-bootstrap (スキル)
- agent-observability-eval-pipeline (スキル)
- agent-observability-experiment-analyzer (スキル)
- agent-observability-online-experiment (スキル)
README用バッジ
このプロジェクトのメンテナーの方は、このページにリンクするバッジを追加できます。
[](https://kitbay.app/skills/datadog-labs-agent-observability-experiment-bootstrap/)
出典
- スキルファイル(SKILL.md)github.com/datadog-labs/agent-skills2026年11月10日
- README(README.md)github.com/datadog-labs/agent-skills2026年11月13日
- ライセンスファイル(LICENSE)github.com/datadog-labs/agent-skills · 根拠となる項目:ライセンス, 公式かどうか2026年11月13日
- GitHubリポジトリgithub.com/datadog-labs/agent-skills · 根拠となる項目:公開元, 活動状況, ライセンス2026年11月11日
- リポジトリ内のフォルダ(agent-observability-experiment-bootstrap)github.com/datadog-labs/agent-skills · 根拠となる項目:スクリプトを含む2026年11月10日