MLflow Skills
Ajan geliştirmede döngüyü kapatıyor: kur, izle, değerlendir, değiştir, değişikliğin işe yaradığını doğrula.
Kurulum
ResmiScript içeriyorClaude Code: /plugin marketplace add anthropics/claude-plugins-official → /plugin install mlflow@claude-plugins-official
Bir LLM uygulamasına izleme eklenirken, iz üzerinden arıza aranırken ya da değerlendirme puanlayıcısı kurulurken
- Geliştirici
- MLflow
- Lisans
- Apache-2.0
Parçalar olağan MLflow bileşenleri: Python ve TypeScript için izleme, izleri geri çekme, metrik sorgulama, arıza çözümlemesi. Asıl mesele bunların diziliş biçimi, çünkü puanlayıcı olmadan bir ajan iyileştirmesi kanaatten öteye geçmiyor. Puanlayıcı becerisi işe hazır listeden seçmekle başlamayı reddediyor: önce uygulamanın ne yaptığını anlıyor, oradan az sayıda ve bölünemez kalite ölçütü çıkarıyor, ancak ondan sonra her ölçütü yargılayabilecek en ucuz puanlayıcıyı seçiyor. Neyin yanlış sayıldığı konusunda son sözü kullanıcıya bırakıyor. İlk denemede kusursuzluk yerine çalıştırılabilir ve incelenebilir bir prototip hedeflemesi, döngünün dönmeye devam etmesini sağlıyor.
Benzer skill'ler
Skill Seekers
SkillDoküman sitesini, depoyu ya da PDF'i ajan skill'ine çevirir.
PluginEval
SkillBir Claude Code skill'ini on boyutta puanlıyor: statik denetim, LLM hakemi ve Monte Carlo koşuları.
DeepEval Skills
SkillLLM uygulamaları için değerlendirme, izleme ve OpenTelemetry; üç ayrı ve örtüşmeyen skill.
Yorumlar(0)
Yorum yapmak için giriş yap