kill Creator A skill for creating new skills and iteratively improving them. At a high level, the process of creating a skill goes like this: Decide what you want the skill to do and roughly how it should do it Write a draft of the skill Create a few test prompts and run claude-with-access-to-the-skill on them Help the user evaluate the results both qualitatively and quantitatively While the runs happen in the background, draft some quantitative evals if there aren't any (if there are some, you can either use as is or modify if you feel something needs to change about them). Then explain them to the user (or if they already existed, explain the ones that already exist) Use the eval-viewer/generate_review.py script to show the user the results for them to look at, and also let them look at the quantitative metrics Rewrite the skill based on feedback from the user's evaluation of the results (and also if there are any glaring flaws that become apparent from the quantitative benchmarks) Repeat until you're satisfied Expand the test set and try again at larger scale

Yaratıcıyı öldür Yeni beceriler yaratma ve bunları tekrar tekrar geliştirmeye yönelik bir beceri. Yüksek düzeyde, bir beceri yaratma süreci şu şekildedir: Becerinin ne yapmasını istediğinize ve kabaca nasıl yapması gerektiğine karar verin Becerinin taslağını yazın Birkaç test istemi oluşturun ve bunlar üzerinde beceriye erişimli Claude'u çalıştırın Kullanıcının sonuçları hem niteliksel hem de niceliksel olarak değerlendirmesine yardımcı olun Çalıştırmalar arka planda gerçekleşirken, eğer yoksa bazı niceliksel değerlendirmeler taslağı hazırlayın (eğer varsa, olduğu gibi kullanabilir veya bunlarla ilgili bir şeyin değişmesi gerektiğini düşünüyorsanız değişiklik yapabilirsiniz). Daha sonra bunları kullanıcıya açıklayın (veya zaten mevcutsa mevcut olanları açıklayın) Kullanıcıya bakması gereken sonuçları göstermek için eval-viewer/generate_review.py betiğini kullanın ve ayrıca niceliksel metriklere bakmasına izin verin Kullanıcının sonuçlara ilişkin değerlendirmesinden elde edilen geri bildirimlere dayalı olarak beceriyi yeniden yazın (ve ayrıca niceliksel kıyaslamalarda belirgin hale gelen göze çarpan kusurlar varsa) Memnun kalana kadar tekrarlayın Test setini genişletin ve daha büyük ölçekte tekrar deneyin