PluginEval
Valuta le skill di Claude Code su dieci dimensioni
Installazione
Include scriptClaude Code: /plugin marketplace add wshobson/agents → /plugin install plugin-eval@claude-code-workflows
Yazılan bir skill ya da eklentinin kalitesi ölçülürken, iki skill karşılaştırılırken ya da bir pazar yeri için puan eşiği belirlenirken
- Autore
- Seth Hobson
- Licenza
- MIT
La valutazione comprende tre livelli dal costo crescente: un'analisi statica di SKILL.md che termina in meno di due secondi, un giudice LLM che valuta attivazione, orchestrazione, output e ambito in circa trenta secondi, e simulazioni Monte Carlo con cinquanta-cento esecuzioni per stimare l'affidabilità. I controlli statici adottano criteri precisi: la divulgazione progressiva è confrontata con una fascia ideale di 200-600 righe e ogni anti-pattern rilevato riduce di un ulteriore 5% il punteggio del livello, fino a un minimo del 50%. I risultati alimentano una classifica Elo rispetto a un corpus di skill analoghe e il progetto viene distribuito come vero pacchetto Python con suite di test, non come semplice raccolta di prompt.
Skill simili
MLflow Skills
SkillMisura se le modifiche apportate a un agente lo migliorano davvero
DeepEval Skills
SkillValutazione, tracing ed export OpenTelemetry per app LLM
Claude Security
SkillScansione profonda del codice con verifica di ogni vulnerabilità
Commenti(0)
Accedi per commentare