Show HN:技能联盟——面向AI编码代理的私有技能搜索
过去一年,团队专注于AI错误分布研究,论文《错误的架构》从数学上证明AI解决方案在有限领域内需要一组有限的干预措施才能表现良好。为验证这一理论,团队创建了专为AI代理而非人类设计的技能搜索引擎Skill Federation。代理可构想任务所需的最佳技能集,引擎利用关键词丰富与重排序等当前最先进技术进行获取,并在SkillRet上复现了顶尖水平。技能来自内部存储,已尽力通过思科和英伟达安全扫描器预检。该搜索免费开放。
背景速读
Skill Federation 是一个面向 AI 编程代理(coding agent)的技能搜索工具。传统的搜索引擎为人类设计,返回网页链接;Skill Federation 则直接为 AI 代理返回可执行的技能代码片段,让 AI 在写代码时能自动找到相关的函数、库或工具。
该项目基于一篇学术论文《Architecture of Errors》,该论文提出一个论点:AI 解决方案在特定应用范围内(bounded patch domain)只需要有限数量的干预措施就能表现良好。论文还引入了一个测试基准 SkillsBench,用以衡量 AI 代理在拥有合适技能时的性能提升。
项目中提到两个关键概念:"oracle skills"(为 SkillsBench 基准专门设计的技能)和"wild skills"(真实互联网上能找到的通用技能)。项目团队在实验中去掉 oracle skills,仅用 wild skills 测试,结果准确率从 17.5% 提升到 22.8%(相对提升约 30%)。
这个项目对当前 AI 编程代理领域有意义——当前主流做法是让 AI 代理在互联网上搜索文档或直接靠模型内置知识,而 Skill Federation 试图提供一个更可控、更安全的私有技能库(已集成 Cisco 和 Nvidia 的安全扫描)。目前该服务免费开放。