Skill-Audit-Bericht

redteam Audit-Bericht.

Use when the user wants to test their LLM/agent application for safety and security vulnerabilities — jailbreaks, prompt injection, PII extraction, harmful content generation, or evaluator gaming. Also use when the user mentions security testing, adversarial testing, red teaming, safety evaluation, ASR (Attack Success Rate), or "is my app safe to deploy." Outputs ASR paired with over-refusal rate and an audit document.

Experimentell · PrüfenPrüfung nötigErstellt 13. Okt. 2026Heuristisches Metadaten-Audit
76
Audit
70
Vertrauen
70
Qualität
76
Sicherheit
88
Maintain
92
Installieren

OpenAgentSkill Trust Score

70
Manuelle Prüfung

OpenAgentSkill Trust Score

The Trust Score helps an agent decide whether a skill is safe enough to shortlist before installation.

GitHub-Akzeptanz

Info

76

816 GitHub-Stars

Star-/Fork-Aktivität

Info

71

816 Stars und 65 Forks; Issue-Aktivität ist in den aktuellen Metadaten nicht verfügbar

Aktuelle Wartung

Bestanden

88

2 Monate seit dem letzten Push

Lizenzklarheit

Bestanden

86

Apache-2.0

README/SKILL.md-Vollständigkeit

Bestanden

86

Metadaten enthalten ausreichend Nutzungs- und Workflow-Kontext

Abhängigkeits-/Laufzeitrisiko

Info

64

command execution surface, database surface

Installationsverfügbarkeit

Bestanden

92

npx skills add agentscope-ai/OpenJudge --skill redteam

Sicherheit des Installationsbefehls

Bestanden

92

Standard-Paket- oder Laufzeit-Installationspfad

Berechtigungsumfang

Warnung

50

shell or command execution, filesystem or document access

Repository-Nachweis

Bestanden

86

https://github.com/agentscope-ai/OpenJudge/tree/main/skills/eval_pipeline/07-redteam

Prüfstatus

Info

66

KI-Prüfdaten verfügbar

Agent-validierte Ergebnisse

Info

54

Noch keine Agent-Ergebnisdaten

Prüfungen

Installations- und Adoptionsprüfung

7 Bestanden · 13 Prüfung nötig

Installationspfad

92

Bestanden

npx skills add agentscope-ai/OpenJudge --skill redteam

Repository

88

Bestanden

https://github.com/agentscope-ai/OpenJudge/tree/main/skills/eval_pipeline/07-redteam

Lizenz

86

Bestanden

Apache-2.0

Wartung

88

Bestanden

2 Monate seit dem letzten Push

KI-Prüfung

55

Prüfen

The script assumes a specific JSONL schema for attack and over-refusal rows; while documented, it could be more flexible or provide validation errors for malformed input.

README/SKILL.md-Vollständigkeit

86

Bestanden

Usable description available

Abhängigkeitsrisiko

64

Prüfen

command execution surface, database surface

Sicherheit des Installationsbefehls

92

Bestanden

Standard-Paket- oder Laufzeit-Installationspfad

Berechtigungsumfang

50

Beheben

shell or command execution, filesystem or document access

Star-/Fork-Aktivität

71

Prüfen

816 Stars und 65 Forks; Issue-Aktivität ist in den aktuellen Metadaten nicht verfügbar

Akzeptanz

88

Bestanden

816 GitHub-Stars

Financial decision safety

58

Prüfen

Research-only use: do not treat output as financial advice or execute a position without human approval.

Warnungen

  • Permission surface may require sandboxing
  • Financial research output is not financial advice; require human review before any live investment decision
  • The script assumes a specific JSONL schema for attack and over-refusal rows; while documented, it could be more flexible or provide validation errors for malformed input.
  • The SKILL.md excerpt is truncated in the review, but the visible content is thorough; the full file likely covers all steps.
  • Financial research output is not financial advice; require human review before any live investment decision.
  • Quality score needs review
  • Permission surface needs review: shell or command execution, filesystem or document access
  • Permission surface: shell or command execution, filesystem or document access

Methode

This report combines public metadata, AI review output, repository freshness, install readiness, OpenAgentSkill events, quality scoring, trust checks, and the agent safety gate. It is not a full source-code security review.

Nahe Optionen vergleichen

Ähnliche Skills als Nächstes prüfen