Skill-Audit-Bericht

align-human Audit-Bericht.

Use when the user has a judge/grader and human-labeled data, and wants to measure how well the judge agrees with humans, detect systematic biases, determine whether automatic evaluation can replace human review, or build a human-reduction roadmap. Also use when the user mentions calibration, TPR/TNR, judge validation, inter-rater agreement, Cohen's kappa, bias detection, or "is my automatic evaluation trustworthy." Merges the calibrate and align functions into one skill.

Blockiert · BlockierenRiskantErstellt 13. Okt. 2026Heuristisches Metadaten-Audit
80
Audit
79
Vertrauen
70
Qualität
84
Sicherheit
88
Maintain
92
Installieren

OpenAgentSkill Trust Score

79
Starke Shortlist

OpenAgentSkill Trust Score

The Trust Score helps an agent decide whether a skill is safe enough to shortlist before installation.

GitHub-Akzeptanz

Info

76

816 GitHub-Stars

Star-/Fork-Aktivität

Info

71

816 Stars und 65 Forks; Issue-Aktivität ist in den aktuellen Metadaten nicht verfügbar

Aktuelle Wartung

Bestanden

88

2 Monate seit dem letzten Push

Lizenzklarheit

Bestanden

86

Apache-2.0

README/SKILL.md-Vollständigkeit

Bestanden

86

Metadaten enthalten ausreichend Nutzungs- und Workflow-Kontext

Abhängigkeits-/Laufzeitrisiko

Info

72

Befehlsausführungsfläche

Installationsverfügbarkeit

Bestanden

92

npx skills add agentscope-ai/OpenJudge --skill align-human

Sicherheit des Installationsbefehls

Bestanden

92

Standard-Paket- oder Laufzeit-Installationspfad

Berechtigungsumfang

Info

62

shell or command execution, filesystem or document access

Repository-Nachweis

Bestanden

86

https://github.com/agentscope-ai/OpenJudge/tree/main/skills/eval_pipeline/03-align-human

Prüfstatus

Bestanden

88

KI-Prüfdaten verfügbar

Agent-validierte Ergebnisse

Info

54

Noch keine Agent-Ergebnisdaten

Prüfungen

Installations- und Adoptionsprüfung

8 Bestanden · 6 Prüfung nötig

Installationspfad

92

Bestanden

npx skills add agentscope-ai/OpenJudge --skill align-human

Repository

88

Bestanden

https://github.com/agentscope-ai/OpenJudge/tree/main/skills/eval_pipeline/03-align-human

Lizenz

86

Bestanden

Apache-2.0

Wartung

88

Bestanden

2 Monate seit dem letzten Push

KI-Prüfung

88

Bestanden

Approved with no listed issues

README/SKILL.md-Vollständigkeit

86

Bestanden

Usable description available

Abhängigkeitsrisiko

72

Prüfen

Befehlsausführungsfläche

Sicherheit des Installationsbefehls

92

Bestanden

Standard-Paket- oder Laufzeit-Installationspfad

Berechtigungsumfang

62

Prüfen

shell or command execution, filesystem or document access

Star-/Fork-Aktivität

71

Prüfen

816 Stars und 65 Forks; Issue-Aktivität ist in den aktuellen Metadaten nicht verfügbar

Akzeptanz

88

Bestanden

816 GitHub-Stars

Warnungen

  • Potential broker, wallet, exchange, or real-money execution surface; sandbox and explicit approval are required
  • This skill may touch real-money trading, broker, wallet, or exchange operations; use only in a sandbox with explicit approval.
  • Quality score needs review

Methode

This report combines public metadata, AI review output, repository freshness, install readiness, OpenAgentSkill events, quality scoring, trust checks, and the agent safety gate. It is not a full source-code security review.

Nahe Optionen vergleichen

Ähnliche Skills als Nächstes prüfen