スキル監査レポート

eval-design 監査レポート.

Use when the user needs to design evaluation datasets, create test cases, stratify samples, generate adversarial examples, extract eval dimensions from traces/specs, or build a labeled evaluation set. Also use when the user mentions test data design, eval coverage, difficulty stratification, synthetic data generation for eval, or "how to create good evaluation data." Outputs datasets in OpenJudge-compatible format.

実験的 · レビュー要レビュー生成日 2026年10月13日ヒューリスティックなメタデータ監査
77
監査
73
信頼
70
品質
75
セキュリティ
88
保守
92
インストール

OpenAgentSkill Trust Score

73
有力候補

OpenAgentSkill Trust Score

Trust Score は、インストール前に候補に入れる安全性を Agent が判断する助けになります。

GitHub 採用度

情報

76

GitHub スター 816

スター/フォーク活動

情報

71

スター 816、フォーク 65; 現在のメタデータでは Issue 活動を利用できません

最近のメンテナンス

合格

88

最終プッシュから 2 か月

ライセンスの明確さ

合格

86

Apache-2.0

README/SKILL.md の完全性

合格

86

メタデータには十分な利用・ワークフロー文脈があります

依存関係/ランタイムのリスク

情報

72

コマンド実行範囲

インストール可否

合格

92

npx skills add agentscope-ai/OpenJudge --skill eval-design

インストールコマンドの安全性

情報

68

dynamic command execution, standard package or runtime install path

権限範囲

情報

62

shell or command execution, filesystem or document access

リポジトリ根拠

合格

86

https://github.com/agentscope-ai/OpenJudge/tree/main/skills/eval_pipeline/01-eval-design

レビュー状況

情報

66

AI レビューデータを利用できます

Agent 検証結果

情報

54

Agent の成果データはまだありません

チェック

インストールと採用のレビュー

6 合格 · 7 要レビュー

インストール経路

92

合格

npx skills add agentscope-ai/OpenJudge --skill eval-design

リポジトリ

88

合格

https://github.com/agentscope-ai/OpenJudge/tree/main/skills/eval_pipeline/01-eval-design

ライセンス

86

合格

Apache-2.0

メンテナンス

88

合格

最終プッシュから 2 か月

AI レビュー

55

確認

Minor inconsistency: SKILL.md states a 60/30/10 difficulty split, but the bundled coverage_check.py uses EXPECTED_STRATA = {'easy': 0.55, 'boundary': 0.30, 'adversarial': 0.10}. This could confuse users relying on the documented split.

README/SKILL.md の完全性

86

合格

Usable description available

依存関係リスク

72

確認

コマンド実行範囲

インストールコマンドの安全性

68

確認

dynamic command execution, standard package or runtime install path

権限範囲

62

確認

shell or command execution, filesystem or document access

スター/フォーク活動

71

確認

スター 816、フォーク 65; 現在のメタデータでは Issue 活動を利用できません

採用度

88

合格

GitHub スター 816

警告

  • Minor inconsistency: SKILL.md states a 60/30/10 difficulty split, but the bundled coverage_check.py uses EXPECTED_STRATA = {'easy': 0.55, 'boundary': 0.30, 'adversarial': 0.10}. This could confuse users relying on the documented split.
  • Quality score needs review

方法

このレポートは公開メタデータ、AI レビュー、リポジトリの鮮度、インストール準備、OpenAgentSkill イベント、品質スコア、信頼チェック、Agent セーフティゲートを統合します。完全なソースコード監査ではありません。

近い選択肢を比較

次に監査する関連スキル