Vorinstallations-Eval

prompt-regression Eval-Bericht.

Eine maschinenlesbare Installationsentscheidung für Agents: Task-Fit, Trust Score, Audit Score, Installationssicherheit, Berechtigungsumfang und ein konkreter Validierungsplan vor dem Einsatz im Workspace.

FehlgeschlagenHohes RisikoBlockieren Richtlinie
69
Eval-Bericht
72
Vertrauen
77
Audit
49
Agent-Sicherheit

do not auto install

Audit score: Risky

Erforderliche Gates

Prüfungen, die ein Agent vor der Installation bestehen muss

JSON öffnen

Aufgabenpassung

84

Bestanden

Task wording matches this skill metadata.

  • Evaluate prompt-regression before installing it in an agent workflow
  • Coding-Agents
  • Coding agents workflows; Claude Code teams; teams that value GitHub adoption signals

Installationspfad

92

Bestanden

Install handoff is available.

  • npx skills add agentscope-ai/OpenJudge --skill prompt-regression

Sicherheit des Installationsbefehls

92

Bestanden

Standard-Paket- oder Laufzeit-Installationspfad

  • npx skills add agentscope-ai/OpenJudge --skill prompt-regression

Vertrauenswert

72

Warnung

Good trust signals with a few areas worth checking before rollout.

  • Starke Shortlist
  • 816 GitHub-Stars
  • Apache-2.0

Audit-Score

77

Fehlgeschlagen

Riskant

  • Potential broker, wallet, exchange, or real-money execution surface; sandbox and explicit approval are required

Agent-Sicherheitsprüfung

49

Fehlgeschlagen

This skill should not be selected by an agent without explicit human security review.

  • Do not auto-install. Inspect the source, dependencies, and permission surface first.
  • Audit risk exceeds the requested agent policy

Lizenzklarheit

86

Bestanden

Apache-2.0

  • Apache-2.0

Berechtigungsumfang

64

Warnung

Shell- oder Befehlsausführung, Datenbankzugriff

  • Shell or command execution: high
  • Network access: medium
  • Database access: medium

Validierungsplan

Was der Agent als Nächstes tun sollte

  1. 1Inspect repository, README/SKILL.md, license, and recent commits before production use.
  2. 2Install in an isolated workspace or sandbox with no production secrets available.
  3. 3Run the smallest representative task and record files touched, commands run, network access, and outputs.
  4. 4Compare the selected skill against at least one alternative when the eval status is review or failed.
  5. 5Promote only after the agent reports a successful verification result and unresolved warnings are accepted.

Nicht verwenden, wenn

Bedingungen für eine andere Skill

  • Teams, die ein vom Anbieter unterstütztes SLA benötigen
  • production agents without a repository review
  • The full implementation of scripts/pairwise.py is not visible in the excerpt, but the provided portion indicates a well-structured, stdlib-only script with clear usage and exit codes.
  • Audit risk risky exceeds max_risk=medium
  • Hinweise auf Hochrisiko-Berechtigungen: Shell- oder Befehlsausführung
  • Potential broker, wallet, exchange, or real-money execution surface; sandbox and explicit approval are required

Unterstützende Prüfungen

Vertrauenssignale hinter der Entscheidung

README/SKILL.md-Vollständigkeit

Bestanden

86

Metadaten enthalten ausreichend Nutzungs- und Workflow-Kontext

Aktuelle Wartung

Bestanden

88

2 Monate seit dem letzten Push

Alternativen verfügbar

Bestanden

82

Alternative skills are available for comparison.