Informe de auditoría del skill

align-human Informe de auditoría.

Use when the user has a judge/grader and human-labeled data, and wants to measure how well the judge agrees with humans, detect systematic biases, determine whether automatic evaluation can replace human review, or build a human-reduction roadmap. Also use when the user mentions calibration, TPR/TNR, judge validation, inter-rater agreement, Cohen's kappa, bias detection, or "is my automatic evaluation trustworthy." Merges the calibrate and align functions into one skill.

Bloqueado · BloquearRiesgosoGenerado 14 oct 2026Auditoría heurística de metadatos
80
Auditoría
79
Confianza
70
Calidad
84
Seguridad
88
Maintain
92
Instalar

Trust Score de OpenAgentSkill

79
Lista sólida

Trust Score de OpenAgentSkill

The Trust Score helps an agent decide whether a skill is safe enough to shortlist before installation.

Adopción en GitHub

Info

76

816 estrellas de GitHub

Actividad de stars/forks

Info

71

816 estrellas y 65 forks; la actividad de issues no está disponible en los metadatos actuales

Mantenimiento reciente

Aprobado

88

2 meses desde el último push

Claridad de licencia

Aprobado

86

Apache-2.0

Completitud de README/SKILL.md

Aprobado

86

Los metadatos incluyen suficiente contexto de uso y flujo de trabajo

Riesgo de dependencias/runtime

Info

72

Superficie de ejecución de comandos

Disponibilidad de instalación

Aprobado

92

npx skills add agentscope-ai/OpenJudge --skill align-human

Seguridad del comando de instalación

Aprobado

92

Ruta estándar de paquete o instalación en tiempo de ejecución

Superficie de permisos

Info

62

shell or command execution, filesystem or document access

Evidencia del repositorio

Aprobado

86

https://github.com/agentscope-ai/OpenJudge/tree/main/skills/eval_pipeline/03-align-human

Estado de revisión

Aprobado

88

Hay datos de revisión por IA disponibles

Resultados comprobados por Agent

Info

54

Aún no hay datos de resultados del Agent

Comprobaciones

Revisión de instalación y adopción

8 Aprobado · 6 Requiere revisión

Ruta de instalación

92

Aprobado

npx skills add agentscope-ai/OpenJudge --skill align-human

Repositorio

88

Aprobado

https://github.com/agentscope-ai/OpenJudge/tree/main/skills/eval_pipeline/03-align-human

Licencia

86

Aprobado

Apache-2.0

Mantenimiento

88

Aprobado

2 meses desde el último push

Revisión por IA

88

Aprobado

Approved with no listed issues

Completitud de README/SKILL.md

86

Aprobado

Usable description available

Riesgo de dependencias

72

Revisar

Superficie de ejecución de comandos

Seguridad del comando de instalación

92

Aprobado

Ruta estándar de paquete o instalación en tiempo de ejecución

Superficie de permisos

62

Revisar

shell or command execution, filesystem or document access

Actividad de stars/forks

71

Revisar

816 estrellas y 65 forks; la actividad de issues no está disponible en los metadatos actuales

Adopción

88

Aprobado

816 estrellas de GitHub

Advertencias

  • Potential broker, wallet, exchange, or real-money execution surface; sandbox and explicit approval are required
  • This skill may touch real-money trading, broker, wallet, or exchange operations; use only in a sandbox with explicit approval.
  • Quality score needs review

Método

This report combines public metadata, AI review output, repository freshness, install readiness, OpenAgentSkill events, quality scoring, trust checks, and the agent safety gate. It is not a full source-code security review.

Comparar opciones cercanas

Skills relacionados para auditar después