Rapport d’audit du skill

evaluate-ml-pipeline Rapport d’audit.

Methodology for evaluating a single sklearn-compatible learner (in particular, the `SkrubLearner` produced by `build-ml-pipeline`). Owns: which entry point to call (`skore.evaluate` first, the explicit report classes when needed), which cross-validator to pick from scikit-learn's catalogue, how to consume the structural metadata (`groups`, `times`, …) attached at build time via `.skb.mark_as_X(split_kwargs=...)`. Stops at "what does the report say". Defaults (metrics, plots) come from skore; only override on explicit user request. TRIGGER when: code calls `cross_val_score`, `cross_validate`, `classification_report`, or any handwritten metric print (`print(mean_squared_error(...))`); code calls `.skb.cross_validate(...)` (route through skore for richer output); user asks how to score, evaluate, or compare a single learner; user asks how to pick a cross-validator; user wants to see a report / metrics / diagnostic plots for a fitted learner. SKIP when: declaring the pipeline (use `build-m

Bloqué · BloquerRevue nécessaireGénéré 13 oct. 2026Audit heuristique des métadonnées
73
Audit
71
Confiance
59
Qualité
73
Sécurité
88
Maintain
92
Installer

Trust Score OpenAgentSkill

71
Revue manuelle

Trust Score OpenAgentSkill

The Trust Score helps an agent decide whether a skill is safe enough to shortlist before installation.

Adoption GitHub

Info

62

122 stars GitHub

Activité stars/forks

Avertissement

51

122 stars et 8 forks; l’activité des issues n’est pas disponible dans les métadonnées actuelles

Maintenance récente

Validé

88

1 mois depuis le dernier push

Clarté de licence

Validé

86

BSD-3-Clause

Complétude README/SKILL.md

Validé

86

Les métadonnées incluent suffisamment de contexte d’usage et de workflow

Risque dépendances/runtime

Info

64

credential or environment access, network or browser surface

Disponibilité de l’installation

Validé

92

npx skills add probabl-ai/skills --skill evaluate-ml-pipeline

Sécurité de la commande d’installation

Validé

92

Chemin d’installation standard de package ou runtime

Surface de permissions

Échoué

22

secrets or environment access, shell or command execution

Preuve du dépôt

Validé

86

https://github.com/probabl-ai/skills/tree/main/skills/evaluate-ml-pipeline

État de revue

Avertissement

46

L’approbation de revue IA est absente

Résultats prouvés par Agent

Info

54

Pas encore de données de résultats Agent

Vérifications

Revue d’installation et d’adoption

6 Validé · 14 Revue nécessaire

Chemin d’installation

92

Validé

npx skills add probabl-ai/skills --skill evaluate-ml-pipeline

Dépôt

88

Validé

https://github.com/probabl-ai/skills/tree/main/skills/evaluate-ml-pipeline

Licence

86

Validé

BSD-3-Clause

Maintenance

88

Validé

1 mois depuis le dernier push

Revue IA

55

Vérifier

Review approval is missing

Complétude README/SKILL.md

86

Validé

Usable description available

Risque de dépendances

64

Vérifier

credential or environment access, network or browser surface

Sécurité de la commande d’installation

92

Validé

Chemin d’installation standard de package ou runtime

Surface de permissions

22

Corriger

secrets or environment access, shell or command execution

Activité stars/forks

51

Corriger

122 stars et 8 forks; l’activité des issues n’est pas disponible dans les métadonnées actuelles

Adoption

68

Info

122 stars GitHub

Financial decision safety

58

Vérifier

Research-only use: do not treat output as financial advice or execute a position without human approval.

Avertissements

  • Permission surface may require sandboxing
  • Financial research output is not financial advice; require human review before any live investment decision
  • L’approbation de revue IA est absente
  • Financial research output is not financial advice; require human review before any live investment decision.
  • Quality score needs review
  • Permission surface needs review: secrets or environment access, shell or command execution
  • Stars/forks activity: 122 stars, 8 forks; issue activity unavailable in current metadata
  • Permission surface: secrets or environment access, shell or command execution
  • Review status: AI review approval is missing

Méthode

This report combines public metadata, AI review output, repository freshness, install readiness, OpenAgentSkill events, quality scoring, trust checks, and the agent safety gate. It is not a full source-code security review.

Comparer les options proches

Skills associés à auditer ensuite