Informe de auditoría del skill

eval-design Informe de auditoría.

Use when the user needs to design evaluation datasets, create test cases, stratify samples, generate adversarial examples, extract eval dimensions from traces/specs, or build a labeled evaluation set. Also use when the user mentions test data design, eval coverage, difficulty stratification, synthetic data generation for eval, or "how to create good evaluation data." Outputs datasets in OpenJudge-compatible format.

Experimental · RevisarRequiere revisiónGenerado 13 oct 2026Auditoría heurística de metadatos
77
Auditoría
73
Confianza
70
Calidad
75
Seguridad
88
Maintain
92
Instalar

Trust Score de OpenAgentSkill

73
Lista sólida

Trust Score de OpenAgentSkill

The Trust Score helps an agent decide whether a skill is safe enough to shortlist before installation.

Adopción en GitHub

Info

76

816 estrellas de GitHub

Actividad de stars/forks

Info

71

816 estrellas y 65 forks; la actividad de issues no está disponible en los metadatos actuales

Mantenimiento reciente

Aprobado

88

2 meses desde el último push

Claridad de licencia

Aprobado

86

Apache-2.0

Completitud de README/SKILL.md

Aprobado

86

Los metadatos incluyen suficiente contexto de uso y flujo de trabajo

Riesgo de dependencias/runtime

Info

72

Superficie de ejecución de comandos

Disponibilidad de instalación

Aprobado

92

npx skills add agentscope-ai/OpenJudge --skill eval-design

Seguridad del comando de instalación

Info

68

dynamic command execution, standard package or runtime install path

Superficie de permisos

Info

62

shell or command execution, filesystem or document access

Evidencia del repositorio

Aprobado

86

https://github.com/agentscope-ai/OpenJudge/tree/main/skills/eval_pipeline/01-eval-design

Estado de revisión

Info

66

Hay datos de revisión por IA disponibles

Resultados comprobados por Agent

Info

54

Aún no hay datos de resultados del Agent

Comprobaciones

Revisión de instalación y adopción

6 Aprobado · 7 Requiere revisión

Ruta de instalación

92

Aprobado

npx skills add agentscope-ai/OpenJudge --skill eval-design

Repositorio

88

Aprobado

https://github.com/agentscope-ai/OpenJudge/tree/main/skills/eval_pipeline/01-eval-design

Licencia

86

Aprobado

Apache-2.0

Mantenimiento

88

Aprobado

2 meses desde el último push

Revisión por IA

55

Revisar

Minor inconsistency: SKILL.md states a 60/30/10 difficulty split, but the bundled coverage_check.py uses EXPECTED_STRATA = {'easy': 0.55, 'boundary': 0.30, 'adversarial': 0.10}. This could confuse users relying on the documented split.

Completitud de README/SKILL.md

86

Aprobado

Usable description available

Riesgo de dependencias

72

Revisar

Superficie de ejecución de comandos

Seguridad del comando de instalación

68

Revisar

dynamic command execution, standard package or runtime install path

Superficie de permisos

62

Revisar

shell or command execution, filesystem or document access

Actividad de stars/forks

71

Revisar

816 estrellas y 65 forks; la actividad de issues no está disponible en los metadatos actuales

Adopción

88

Aprobado

816 estrellas de GitHub

Advertencias

  • Minor inconsistency: SKILL.md states a 60/30/10 difficulty split, but the bundled coverage_check.py uses EXPECTED_STRATA = {'easy': 0.55, 'boundary': 0.30, 'adversarial': 0.10}. This could confuse users relying on the documented split.
  • Quality score needs review

Método

This report combines public metadata, AI review output, repository freshness, install readiness, OpenAgentSkill events, quality scoring, trust checks, and the agent safety gate. It is not a full source-code security review.

Comparar opciones cercanas

Skills relacionados para auditar después