Skill Creator - Crearea și Optimizarea Skill-urilor
Ce face
Skill Creator e skill-ul care te ajută să construiești skill-uri noi de la zero, să modifici sau să îmbunătățești unele existente și să măsori cât de bine funcționează. Procesul e iterativ: stabilești ce vrei să facă skill-ul, scrii o primă versiune, creezi prompturi de test, rulezi evaluări cantitative și calitative, apoi rescrii pe baza feedback-ului. Poți rula evals cu variance analysis, poți optimiza descrierea pentru declanșare mai precisă și poți scala testele treptat până skill-ul devine stabil.
Când îmi folosește
Folosește-l când vrei să creezi un skill nou, să editezi unul vechi, să rulezi benchmark-uri sau să optimizezi descrierea ca să se declanșeze mai corect. E util și când ai deja un draft și vrei doar să-l evaluezi, sau când vrei să sari direct la partea de iterații și măsurători. Dacă nu-ți pasă de metrici riguroase și vrei doar să „simți” cum merge, skill-ul se adaptează și la asta.
Cum îl invoc / declanșez
Spune-i sistemului clar ce skill vrei să creezi sau ce skill existent vrei să modifici. Skill Creator detectează automat intenția și intră în bucla de draft-eval-iterație. Pentru detalii exacte despre comenzi sau fișiere de config, verifică doctrina pentru detalii exacte.
Exemplu practic
Zici: „Vreau un skill care să rezume meeting-uri și să extragă action items”. Skill Creator întreabă clarificări, scrie prima versiune, generează 5-6 prompturi de test, rulează evaluările în background și-ți arată rezultatele cu eval-viewer/generate_review.py. După ce vezi metricile și exemplele, spui ce nu merge (de exemplu „ratează action items când meeting-ul e tehnic”) și skill-ul rescrie descrierea și logica.
Output / unde aterizează
Skill-ul nou sau modificat apare ca fișier în structura de skill-uri a sistemului, împreună cu eventualele eval scripts și rapoarte de performanță. Poți vedea rezultatele cantitative direct din scriptul de review și poți compara variantele înainte de a le promova.
Limite / gotchas
Nu înlocuiește evaluarea umană complet – metricile ajută, dar uneori vibe-ul contează mai mult. Dacă skill-ul e foarte vag definit, iterațiile pot dura mai mult. Skill Creator nu rulează automat la scară mare fără să-i spui explicit; trebuie să aprobi extinderea setului de teste. Pentru optimizarea finală a descrierii de declanșare există un script separat pe care ți-l poate rula la final.