PluginEval
Ocenia umiejętności Claude Code w dziesięciu wymiarach
Instalacja
Zawiera skryptyClaude Code: /plugin marketplace add wshobson/agents → /plugin install plugin-eval@claude-code-workflows
Yazılan bir skill ya da eklentinin kalitesi ölçülürken, iki skill karşılaştırılırken ya da bir pazar yeri için puan eşiği belirlenirken
- Autor
- Seth Hobson
- Licencja
- MIT
Trzy coraz kosztowniejsze warstwy obejmują analizę statyczną pliku SKILL.md, ocenę przez model językowy oraz od 50 do 100 przebiegów Monte Carlo szacujących niezawodność. Kontrole statyczne preferują stopniowe ujawnianie informacji w plikach liczących od 200 do 600 wierszy, a każdy wykryty antywzorzec obniża wynik warstwy o kolejne pięć procent, nie niżej jednak niż do połowy. Wyniki trafiają do rankingu Elo względem innych umiejętności, a całość jest dostarczana jako właściwy pakiet Python z zestawem testów.
Podobne umiejętności
MLflow Skills
UmiejętnośćMierzy, czy zmiany w agencie rzeczywiście przynoszą poprawę
DeepEval Skills
UmiejętnośćEwaluacja, śledzenie i eksport OpenTelemetry dla aplikacji LLM
Claude Security
UmiejętnośćDogłębny skan kodu z weryfikacją każdego wykrytego problemu
Komentarze(0)
Zaloguj się, aby skomentować