LLM Finetuning

Claude Code: /plugin marketplace add wshobson/agents → /plugin install llm-finetuning@claude-code-workflows

Elf Skills strukturieren den Ablauf: zuerst prüfen, ob Fine-Tuning überhaupt sinnvoll ist, dann die Evaluation aufbauen, Daten kuratieren, trainieren und den Checkpoint freigeben. Veränderliche Fakten werden an RAG und noch nicht gefestigtes Verhalten an den Prompt verwiesen; gelabelte Traces erzeugen sowohl den Golden-Datensatz als auch Trainingsdaten, wobei Golden-Beispiele per ID ausgeschlossen werden, um Datenlecks zu verhindern. Die vierstufige Freigabe verlangt auch einen Sieg gegen das Basismodell in einer paarweisen Arena und unterstützt Methoden von LoRA und QLoRA über DPO bis GRPO sowie den Export als GGUF oder FP8.