深扒Claude官方Skill-Creator源码,原来技能是这样炼成的

花了两天时间把Anthropic官方的skill-creator源码逐行拆了一遍,不得不说设计确实精妙。这东西本质上就是一个用来造技能的技能。

几个核心发现分享给大家:

三智能体评估架构:Skill-Creator内部用了Grader、Comparator、Analyzer三个智能体来评估生成的技能质量,互相校验而不是单一模型自说自话。

防过拟合设计:改进模型完全看不到测试集,用的是标准ML里train/test split的思路,确保技能的泛化能力。

流式事件检测:触发率检测用的是流式事件,不是简单的正则匹配,这样准确率高很多。

描述优化建模为搜索问题:把skill的description优化当成一个搜索问题来做,自动迭代直到找到最优描述。

做AI Agent工程化的朋友建议去读一下源码,收获会很大。

源码分析太硬核了

三个智能体互相校验思路好

比单模型靠谱多了

防过拟合这设计专业

ML那套用上了

流式检测比正则强在哪

准确率高误报少

想自己写技能可以参考

大佬有链接吗

GitHub上直接搜就有

之前没想过

Agent工程化是趋势

有启发

设计确实精妙

源码里那个技能注入机制设计得挺巧妙的

建议对比下社区版skill loader的实现差异

文档和源码对不上的地方还挺多的

感觉官方代码质量一般般,注释太少了

@silent_reader GitHub搜anthropic skill-creator就能找到 但直接看源码没什么用 关键是理解三智能体的评估机制 Grader打分 Comparator对比 Optimizer迭代 这套方法论可以迁移到自己的项目里