Rapport d’audit du skill
align-human Rapport d’audit.
Use when the user has a judge/grader and human-labeled data, and wants to measure how well the judge agrees with humans, detect systematic biases, determine whether automatic evaluation can replace human review, or build a human-reduction roadmap. Also use when the user mentions calibration, TPR/TNR, judge validation, inter-rater agreement, Cohen's kappa, bias detection, or "is my automatic evaluation trustworthy." Merges the calibrate and align functions into one skill.
Trust Score OpenAgentSkill
Trust Score OpenAgentSkill
The Trust Score helps an agent decide whether a skill is safe enough to shortlist before installation.
Adoption GitHub
Info76
816 stars GitHub
Activité stars/forks
Info71
816 stars et 65 forks; l’activité des issues n’est pas disponible dans les métadonnées actuelles
Maintenance récente
Validé88
2 mois depuis le dernier push
Clarté de licence
Validé86
Apache-2.0
Complétude README/SKILL.md
Validé86
Les métadonnées incluent suffisamment de contexte d’usage et de workflow
Risque dépendances/runtime
Info72
Surface d’exécution de commandes
Disponibilité de l’installation
Validé92
npx skills add agentscope-ai/OpenJudge --skill align-human
Sécurité de la commande d’installation
Validé92
Chemin d’installation standard de package ou runtime
Surface de permissions
Info62
shell or command execution, filesystem or document access
Preuve du dépôt
Validé86
https://github.com/agentscope-ai/OpenJudge/tree/main/skills/eval_pipeline/03-align-human
État de revue
Validé88
Données de revue IA disponibles
Résultats prouvés par Agent
Info54
Pas encore de données de résultats Agent
Vérifications
Revue d’installation et d’adoption
Chemin d’installation
92
npx skills add agentscope-ai/OpenJudge --skill align-human
Dépôt
88
https://github.com/agentscope-ai/OpenJudge/tree/main/skills/eval_pipeline/03-align-human
Licence
86
Apache-2.0
Maintenance
88
2 mois depuis le dernier push
Revue IA
88
Approved with no listed issues
Complétude README/SKILL.md
86
Usable description available
Risque de dépendances
72
Surface d’exécution de commandes
Sécurité de la commande d’installation
92
Chemin d’installation standard de package ou runtime
Surface de permissions
62
shell or command execution, filesystem or document access
Activité stars/forks
71
816 stars et 65 forks; l’activité des issues n’est pas disponible dans les métadonnées actuelles
Adoption
88
816 stars GitHub
Avertissements
- Potential broker, wallet, exchange, or real-money execution surface; sandbox and explicit approval are required
- This skill may touch real-money trading, broker, wallet, or exchange operations; use only in a sandbox with explicit approval.
- Quality score needs review
Méthode
This report combines public metadata, AI review output, repository freshness, install readiness, OpenAgentSkill events, quality scoring, trust checks, and the agent safety gate. It is not a full source-code security review.
Comparer les options proches
Skills associés à auditer ensuite
Frontend Design
Guidance for distinctive, intentional UI design, typography, visual direction, and non-template-like product interfaces.
181K Stars · Rapport d’audit
Taste Skill: Anti-Slop Frontend
Design and implementation guidance for distinctive landing pages, portfolios, product demos, and purposeful redesigns.
95K Stars · Rapport d’audit
Canvas Design
Create original visual art, posters, PNG assets, and PDF documents through a clear design philosophy.
181K Stars · Rapport d’audit