Star200+

Vorinstallations-Eval

karpathy-wiki-ingest Eval-Bericht.

Eine maschinenlesbare Installationsentscheidung für Agents: Task-Fit, Trust Score, Audit Score, Installationssicherheit, Berechtigungsumfang und ein konkreter Validierungsplan vor dem Einsatz im Workspace.

FehlgeschlagenHohes RisikoBlockieren Richtlinie
66
Eval-Bericht
70
Vertrauen
77
Audit
33
Agent-Sicherheit

do not auto install

Agent safety gate: This skill should not be selected by an agent without explicit human security review.

Erforderliche Gates

Prüfungen, die ein Agent vor der Installation bestehen muss

JSON öffnen

Aufgabenpassung

94

Bestanden

Task wording matches this skill metadata.

  • Evaluate karpathy-wiki-ingest before installing it in an agent workflow
  • automation
  • RAG and knowledge workflows; Claude Code teams; builders willing to evaluate younger projects

Installationspfad

92

Bestanden

Install handoff is available.

  • npx skills add toolboxmd/karpathy-wiki --skill karpathy-wiki-ingest

Sicherheit des Installationsbefehls

92

Bestanden

Standard-Paket- oder Laufzeit-Installationspfad

  • npx skills add toolboxmd/karpathy-wiki --skill karpathy-wiki-ingest

Vertrauenswert

70

Warnung

Potentially useful, but at least one trust signal needs human inspection.

  • Manuelle Prüfung
  • 101 GitHub-Stars
  • MIT

Audit-Score

77

Warnung

Prüfung nötig

  • Permission surface may require sandboxing

Agent-Sicherheitsprüfung

33

Fehlgeschlagen

This skill should not be selected by an agent without explicit human security review.

  • Do not auto-install. Inspect the source, dependencies, and permission surface first.
  • Metadata combines secrets access with shell or command execution

Lizenzklarheit

86

Bestanden

MIT

  • MIT

Berechtigungsumfang

50

Fehlgeschlagen

shell or command execution, filesystem or document access

  • Shell or command execution: high
  • Network access: medium
  • Filesystem access: medium

Validierungsplan

Was der Agent als Nächstes tun sollte

  1. 1Inspect repository, README/SKILL.md, license, and recent commits before production use.
  2. 2Install in an isolated workspace or sandbox with no production secrets available.
  3. 3Run the smallest representative task and record files touched, commands run, network access, and outputs.
  4. 4Compare the selected skill against at least one alternative when the eval status is review or failed.
  5. 5Promote only after the agent reports a successful verification result and unresolved warnings are accepted.

Nicht verwenden, wenn

Bedingungen für eine andere Skill

  • Teams, die ein vom Anbieter unterstütztes SLA benötigen
  • production agents without a repository review
  • SKILL.md is truncated in the provided excerpt, but the visible content is coherent and complete enough for evaluation.
  • Hinweise auf Hochrisiko-Berechtigungen: Shell or command execution, Secrets or environment access
  • Permission surface may require sandboxing
  • The skill depends on external scripts (wiki-issue-log.sh, wiki-validate-page.py) that are not included in the skill directory; however, they are part of the repository and expected to be present.

Unterstützende Prüfungen

Vertrauenssignale hinter der Entscheidung

README/SKILL.md-Vollständigkeit

Bestanden

86

Metadaten enthalten ausreichend Nutzungs- und Workflow-Kontext

Aktuelle Wartung

Bestanden

100

3 Tage seit dem letzten Push

Alternativen verfügbar

Bestanden

82

Alternative skills are available for comparison.