Laporan audit skill

build-eval-dataset Laporan audit.

Use this to build a good evaluation dataset for an LLM app, the part everyone underestimates. Trigger on "make an eval set", "what should I test my LLM on", "I don't have test data for my prompt", "build a golden dataset", or before setting up evals. A great eval set beats a great metric; garbage-in means your evals lie to you.

Eksperimental · TinjauPerlu ditinjauDihasilkan 14 Okt 2026Audit metadata heuristik
73
Audit
74
Kepercayaan
54
Kualitas
77
Keamanan
88
Maintain
92
Pasang

Trust Score OpenAgentSkill

74
Shortlist kuat

Trust Score OpenAgentSkill

The Trust Score helps an agent decide whether a skill is safe enough to shortlist before installation.

Adopsi GitHub

Peringatan

48

33 star GitHub

Aktivitas star/fork

Peringatan

48

33 star dan 18 fork; aktivitas issue tidak tersedia dalam metadata saat ini

Pemeliharaan terbaru

Lulus

88

1 bulan sejak push

Kejelasan lisensi

Lulus

86

CC0-1.0

Kelengkapan README/SKILL.md

Lulus

86

Metadata memuat konteks penggunaan dan alur kerja yang cukup

Risiko dependensi/runtime

Lulus

90

Tidak ada petunjuk risiko dependensi besar dalam metadata publik

Ketersediaan pemasangan

Lulus

92

npx skills add ContextJet-ai/awesome-llm-observability --skill build-eval-dataset

Keamanan perintah pemasangan

Info

68

dynamic command execution, standard package or runtime install path

Cakupan izin

Lulus

86

Akses sistem file atau dokumen

Bukti repositori

Lulus

86

https://github.com/ContextJet-ai/awesome-llm-observability/tree/main/skills/build-eval-dataset

Status peninjauan

Peringatan

46

Persetujuan tinjauan AI belum ada

Hasil terbukti Agent

Info

54

Belum ada data hasil Agent

Pemeriksaan

Tinjauan pemasangan dan adopsi

7 Lulus · 10 Perlu ditinjau

Jalur pemasangan

92

Lulus

npx skills add ContextJet-ai/awesome-llm-observability --skill build-eval-dataset

Repositori

88

Lulus

https://github.com/ContextJet-ai/awesome-llm-observability/tree/main/skills/build-eval-dataset

Lisensi

86

Lulus

CC0-1.0

Pemeliharaan

88

Lulus

1 bulan sejak push

Tinjauan AI

55

Periksa

Review approval is missing

Kelengkapan README/SKILL.md

86

Lulus

Usable description available

Risiko dependensi

90

Lulus

Tidak ada petunjuk risiko dependensi besar dalam metadata publik

Keamanan perintah pemasangan

68

Periksa

dynamic command execution, standard package or runtime install path

Cakupan izin

86

Lulus

Akses sistem file atau dokumen

Aktivitas star/fork

48

Perbaiki

33 star dan 18 fork; aktivitas issue tidak tersedia dalam metadata saat ini

Adopsi

42

Periksa

33 star GitHub

Peringatan

  • Low GitHub adoption signal
  • Persetujuan tinjauan AI belum ada
  • Quality score needs review
  • GitHub adoption: 33 GitHub stars
  • Stars/forks activity: 33 stars, 18 forks; issue activity unavailable in current metadata
  • Review status: AI review approval is missing

Metode

This report combines public metadata, AI review output, repository freshness, install readiness, OpenAgentSkill events, quality scoring, trust checks, and the agent safety gate. It is not a full source-code security review.

Bandingkan opsi sekitar

Skill terkait untuk diaudit berikutnya