arXiv cs.AI 发布于 10/09 12:00

StoreBench: A Live-Commerce Environment for Evaluating and Training Autonomous Operator Agents

(翻译)StoreBench:用于评估和训练自主运营 Agent 的直播电商环境

查看原文

资讯摘要

Abstract page for arXiv paper 2610.10942: StoreBench: A Live-Commerce Environment for Evaluating and Training Autonomous Operator Agents

AI 摘要

该 arXiv 论文介绍 StoreBench,一个面向直播电商/在线服装店运营的强化学习环境,用于评估和训练自主运营 Agent。环境包含客户下单、供应商调价与故障、市场冲击等动态因素,并用商家工具、预算、脚本策略和人工专家对比评测多种前沿 LLM。

AI 问答

StoreBench 主要用于评估什么?

它用于评估和训练在动态电商环境中进行长周期规划、经济判断和工具操作的自主运营 Agent。

论文中模型表现如何?

七个前沿 LLM 在多个场景中均未达到脚本化 smart-triage 策略的平均水平,最佳模型 DeepSeek-V4-Pro 的通过率为 49%,低于启发式策略的 97%。

作者是否完全公开了评测环境?

作者发布了部分训练任务、样本轨迹以及评分和验证工具,但为避免基准污染,完整环境和评测套件未公开。

打开原文

更多资讯

这家结算网络让美元 24 小时运转金色财经 · 10/09 14:06针对 Fomo 用户的恶意书签钓鱼攻击分析金色财经 · 10/08 20:17从 Rollout 到权重同步:Mooncake 如何支撑高性能强化学习系统|QCon上海InfoQ 中文 · 10/08 18:00中国人民银行关于人民币汇率的政策立场金色财经 · 10/08 21:39加拿大诗人 Anne Carson 赢得诺贝尔文学奖Solidot · 10/08 19:54广告狂人乔治·路易斯的28个Big Idea忠告,句句锋利人人都是产品经理 · 10/08 12:38OpenAI数学大爆炸 加密行业需是否需要资产大迁移?金色财经 · 10/08 11:30The Harness as the Only Mutable Surface: Compliance-Bounded Self-Evolution of LLM Agents in Credit Pipelines, with a Measured Admission GatearXiv cs.AI · 10/09 12:00Ethena无银行背书 如何5%稳定币收益还让渣打站台?金色财经 · 10/09 14:55黄仁勋发布史上最强 Surface!专为「无限智能」设计爱范儿 / APPSO · 10/08 11:22Learning to Report Unsafe Tasks in a Multi-Agent GamearXiv cs.AI · 10/08 12:00为什么微信朋友圈的点赞和评论数量越来越少?人人都是产品经理 · 10/09 10:40Q3加密VC报告:种子轮遇冷 资本只认「硬通货」金色财经 · 10/09 10:25微软携英伟达发布Surface新机 推出“龙虾”个人助手金色财经 · 10/08 09:51再裁员5000人!保时捷明确回归燃油车,高端车型计划涨价20%;腾讯拟发行50亿美元离岸债券,或筹钱加码AI;OpenAI全面上线GPT-6雷峰网 · 10/09 13:45加密货币如何从根本上重塑金融体系金色财经 · 10/08 14:58TOKEN2049到生态共建:火币HTX连接全球加密行业力量金色财经 · 10/09 14:01全球算力分布:2026年Q4季度金色财经 · 10/08 20:0080亿美元芯片卖掉再租回来,亚马逊图什么?人人都是产品经理 · 10/08 09:31Whose Ground Truth? Embracing Ambiguity in Human-Centered AIarXiv cs.AI · 10/09 12:00App+1|所得即所见,更适合中文的字体预览工具:Anyway.Fonts少数派 · 10/09 10:08那些逃避升职的年轻人:提拔我?你可拉倒吧!果壳网 · 10/08 23:15AI让数学再也回不去那个旧世界了。人人都是产品经理 · 10/08 10:57STRK单日跳涨 26% :想从分家单飞”成为抗 AI 的 L1金色财经 · 10/09 09:498点1氪丨国际金价回调,金饰克价已暴跌约150元;A股千元股仅剩3只;711印度门店全部关闭36氪 · 10/09 07:54Anthropic推演2030:GDP多出32.4%,白领为什么反而更便宜?人人都是产品经理 · 10/08 09:13从火山灰到“火山之子”,喀拉喀托的诞生与重生果壳网 · 10/09 13:15链上永续合约:设计取舍与增长催化剂的演变金色财经 · 10/09 16:22F型视觉模型和信息层级的可视化应用人人都是产品经理 · 10/09 10:38从开源清理工具到付费 Mac 应用,用户教会了我如何做产品:Mole少数派 · 10/08 16:10