arXiv cs.AI 发布于 10/08 12:00

An Empirical Study of Agent Skills' Downstream Utility

(翻译)Agent Skills 下游效用的实证研究

查看原文

资讯摘要

Abstract page for arXiv paper 2610.08875: An Empirical Study of Agent Skills' Downstream Utility

AI 摘要

该 arXiv 论文研究 Agent Skills 对下游任务表现的影响,在 87 个 SkillsBench 任务和多种模型配置中比较同一技能、候选技能及组织方式。研究发现技能效用会随配置变化,相关性排名可能忽视更有用候选,并提出 17 条技能编写实践。

AI 问答

这篇论文研究的核心问题是什么?

论文研究 Agent Skills 的内容、执行配置和多技能组织方式如何影响下游任务表现,并将效用定义为相同任务和配置下相较无技能基线的通过率差异。

研究使用了哪些主要数据和方法?

研究在 87 个 SkillsBench 任务上比较同一技能在九种配置中的表现,并从 37596 个 Skills 构成的语料中检索候选,结合 LLM 辅助分析和作者复核。

论文得出了哪些实践启示?

论文认为开发者应评估技能对可用操作的支持,允许过程适配但保留任务要求,并在组织多技能时明确产物依赖关系。

打开原文

更多资讯

针对 Fomo 用户的恶意书签钓鱼攻击分析金色财经 · 10/08 20:17从 Rollout 到权重同步:Mooncake 如何支撑高性能强化学习系统|QCon上海InfoQ 中文 · 10/08 18:00Cloudflare 详解从 WordPress 迁移至 EmDash 的过程InfoQ 中文 · 10/08 23:00早报|苹果定档10月13日发布新品/三星手机业务或减产30%/保时捷计划削减9000个岗位爱范儿 / APPSO · 10/09 08:51打不过就投降,保时捷裁员9000人,回归燃油车主线量子位 · 10/08 15:10腾讯WorkBuddy悄悄上新功能,我再也不用把文件搬来搬去了人人都是产品经理 · 10/09 13:569 月美债遭抛售:不是通胀预期 而是实际利率在飙升金色财经 · 10/09 12:56Self-Supervised Keyframe Discovery for Horizon-Invariant Behavior CloningarXiv cs.AI · 10/09 12:00Abstract 关停警示:拥有资产不等于能转出金色财经 · 10/09 12:15陶哲轩认为数学 2.0 时代应降低解决难题的核心地位Solidot · 10/08 15:35七年第一,三项蝉联!赛迪报告:奇安信持续领跑中国网安市场雷峰网 · 10/08 14:45抖音真正想做的,不是本地生活,而是从娱乐到消费的完整入口人人都是产品经理 · 10/09 14:25Building Reliable Data Analytics Agents: Lessons from the KDD CupNVIDIA Technical Blog · 10/09 02:30美光台工厂工会获得罢工权,支持率 99%Solidot · 10/09 15:13浪子回头!Manus重启北京办公室大举招聘量子位 · 10/08 17:30ChatGPT踢到铁板了!能破解千禧数学难题,但论文复现率低至13.98%?量子位 · 10/08 17:28OpenAI营收逊色重创AI股 标普、纳指两连跌金色财经 · 10/09 11:09Speaking the Navigator's Language: Trajectory-Grounded Instruction Translation for Frozen Aerial VLN AgentsarXiv cs.AI · 10/09 12:00AgentHorizon: Evaluating Agentic Judges for Long-Horizon Computer-Use TasksarXiv cs.AI · 10/09 12:00AI让数学再也回不去那个旧世界了。人人都是产品经理 · 10/08 10:57奥格威导师罗必凯:22条“拒绝平凡”的创意哲学人人都是产品经理 · 10/09 11:05亚马逊 Prime Video 将直播艾美奖颁奖典礼Solidot · 10/09 14:55云栖大会观察:阿里怎么打下一阶段模型战?雷峰网 · 10/08 15:20最新FOMC纪要出炉 看今年最后三个月该如何加息金色财经 · 10/08 14:19Insights4vc:Rain 的 19.5 亿美元估值靠什么撑起金色财经 · 10/09 17:22币安变“股安” Crypto迎来史无前例变革金色财经 · 10/08 16:30An Explainable Header-Centric Framework for Large-Scale Semantic Table Interpretation and Data Quality AssessmentarXiv cs.AI · 10/09 12:00一句话上线产品 AI自主支付还有多远?金色财经 · 10/08 18:06“AI央行”英伟达的“千亿资本局”金色财经 · 10/08 10:22金色早报丨山寨币回落 美CFTC:加密行业正回流美国金色财经 · 10/09 08:42