スキル監査レポート

agent-observability-eval-pipeline 監査レポート.

End-to-end Agent Observability pipeline for an instrumented ml_app — classify production traces, root-cause failures, bootstrap evaluators, then (optionally) sample + publish a dataset, generate + run an experiment, and analyze results. Six narrated phases with a standardized banner and a "continue" checkpoint between each. Pure orchestration over the agent-observability sub-skills (`agent-observability-session-classify`, `agent-observability-trace-rca`, `agent-observability-eval-bootstrap`, `agent-observability-experiment-bootstrap`, `agent-observability-experiment-analyzer`). Use when user says "run the eval pipeline", "go from traces to evals", "bootstrap evals end to end", "classify then RCA then bootstrap", "build an eval set from scratch", "onboard me to datasets and experiments", "walk me through experiments", "I have an ml_app, now what", "Agent Observability onboarding", "guided experiment setup", "from traces to experiments", or wants a deterministic, narrated tour from produ

ブロック済み · ブロック要レビュー生成日 2026年10月13日ヒューリスティックなメタデータ監査
71
監査
63
信頼
66
品質
67
セキュリティ
88
保守
92
インストール

OpenAgentSkill Trust Score

63
手動レビュー

OpenAgentSkill Trust Score

Trust Score は、インストール前に候補に入れる安全性を Agent が判断する助けになります。

GitHub 採用度

情報

62

GitHub スター 158

スター/フォーク活動

警告

57

スター 158、フォーク 25; 現在のメタデータでは Issue 活動を利用できません

最近のメンテナンス

合格

88

最終プッシュから 2 か月

ライセンスの明確さ

合格

86

MIT

README/SKILL.md の完全性

合格

86

メタデータには十分な利用・ワークフロー文脈があります

依存関係/ランタイムのリスク

警告

46

command execution surface, credential or environment access

インストール可否

合格

92

npx skills add datadog-labs/agent-skills --skill agent-observability-eval-pipeline

インストールコマンドの安全性

情報

68

dynamic command execution, standard package or runtime install path

権限範囲

失敗

22

secrets or environment access, shell or command execution

リポジトリ根拠

合格

86

https://github.com/datadog-labs/agent-skills/tree/main/agent-observability/agent-observability-eval-pipeline

レビュー状況

情報

66

AI レビューデータを利用できます

Agent 検証結果

情報

54

Agent の成果データはまだありません

チェック

インストールと採用のレビュー

5 合格 · 14 要レビュー

インストール経路

92

合格

npx skills add datadog-labs/agent-skills --skill agent-observability-eval-pipeline

リポジトリ

88

合格

https://github.com/datadog-labs/agent-skills/tree/main/agent-observability/agent-observability-eval-pipeline

ライセンス

86

合格

MIT

メンテナンス

88

合格

最終プッシュから 2 か月

AI レビュー

55

確認

The skill invokes sub-skills (agent-observability-session-classify, etc.) that are not included in this repository; they must be separately installed for the pipeline to work.

README/SKILL.md の完全性

86

合格

Usable description available

依存関係リスク

46

修正

command execution surface, credential or environment access

インストールコマンドの安全性

68

確認

dynamic command execution, standard package or runtime install path

権限範囲

22

修正

secrets or environment access, shell or command execution

スター/フォーク活動

57

修正

スター 158、フォーク 25; 現在のメタデータでは Issue 活動を利用できません

採用度

68

情報

GitHub スター 158

警告

  • Dependency or permission surface needs review
  • Permission surface may require sandboxing
  • The skill invokes sub-skills (agent-observability-session-classify, etc.) that are not included in this repository; they must be separately installed for the pipeline to work.
  • Phase 5 executes a generated Python script. While this is a core feature, ensure that any user-supplied data (e.g., dataset content) cannot inject unintended code or commands into the generated script.
  • Quality score needs review
  • Permission surface needs review: secrets or environment access, shell or command execution
  • Stars/forks activity: 158 stars, 25 forks; issue activity unavailable in current metadata
  • Dependency/runtime risk: command execution surface, credential or environment access
  • Permission surface: secrets or environment access, shell or command execution

方法

このレポートは公開メタデータ、AI レビュー、リポジトリの鮮度、インストール準備、OpenAgentSkill イベント、品質スコア、信頼チェック、Agent セーフティゲートを統合します。完全なソースコード監査ではありません。

近い選択肢を比較

次に監査する関連スキル