PluginEval
Évalue une compétence Claude Code selon dix dimensions
Installation
Scripts inclusClaude Code: /plugin marketplace add wshobson/agents → /plugin install plugin-eval@claude-code-workflows
Yazılan bir skill ya da eklentinin kalitesi ölçülürken, iki skill karşılaştırılırken ya da bir pazar yeri için puan eşiği belirlenirken
- Auteur
- Seth Hobson
- Licence
- MIT
Trois niveaux se superposent : une analyse statique de SKILL.md en moins de deux secondes, un juge LLM qui note le déclenchement, l’orchestration, la sortie et le périmètre en une trentaine de secondes, puis 50 à 100 exécutions Monte-Carlo pour estimer la fiabilité. Les contrôles statiques privilégient une divulgation progressive sur 200 à 600 lignes, et chaque anti-modèle détecté réduit encore le score du niveau de 5 %, avec un plancher fixé à la moitié. Les résultats alimentent un classement Elo par rapport à un corpus, et l’outil est fourni comme un véritable paquet Python avec une suite de tests.
Compétences similaires
MLflow Skills
CompétenceInstrumente, évalue et vérifie les améliorations des agents
DeepEval Skills
CompétenceÉvaluation, traçage et export OpenTelemetry pour applications LLM
Claude Security
CompétenceAnalyse approfondie du code avec vérification des failles
Commentaires(0)
Connectez-vous pour commenter