PluginEval
Avalia skills do Claude Code em dez dimensões
Instalação
Inclui scriptsClaude Code: /plugin marketplace add wshobson/agents → /plugin install plugin-eval@claude-code-workflows
Yazılan bir skill ya da eklentinin kalitesi ölçülürken, iki skill karşılaştırılırken ya da bir pazar yeri için puan eşiği belirlenirken
- Autor
- Seth Hobson
- Licença
- MIT
A avaliação combina três camadas de custo crescente: análise estática do SKILL.md em menos de dois segundos, julgamento por LLM em cerca de trinta segundos e de cinquenta a cem execuções de Monte Carlo para estimar a confiabilidade. As verificações estáticas favorecem divulgação progressiva entre 200 e 600 linhas, enquanto cada antipadrão detectado reduz a pontuação da camada em mais 5%, até o limite mínimo de 50%. Os resultados alimentam uma classificação Elo contra um corpus, e a ferramenta é distribuída como um pacote Python completo com suíte de testes.
Skills semelhantes
MLflow Skills
SkillInstrumenta, avalia mudanças e verifica se houve melhoria
DeepEval Skills
SkillAvaliação, rastreamento e exportação OpenTelemetry para apps LLM
Claude Security
SkillVarredura profunda com validação de cada vulnerabilidade
Comentários(0)
Entre para comentar