arXiv cs.AI 发布于 09/25 12:00

Beyond Surface Style: Aligning Multi-Turn User Simulators with Behavioral Consistency

(翻译)超越表面风格:使多轮用户模拟器与行为一致性对齐

查看原文

资讯摘要

Abstract page for arXiv paper 2609.28690: Beyond Surface Style: Aligning Multi-Turn User Simulators with Behavioral Consistency

AI 摘要

该论文提出多轮用户模拟器 TRACER,显式建模用户意图演变,并通过真实用户对话监督微调与多轮强化学习两阶段训练对齐真实交互轨迹。在真实客服会话中,TRACER-7B 的转化 F1 超过最强基线 11.4,组级转化率误差与语义轨迹距离最低,并能泛化到分布外场景。基于该模拟器的 Dynamic Marketing Benchmark 显示,回答质量更高未必带来更高转化率。

AI 问答

TRACER 要解决什么问题?

现有用户模拟器虽能生成看似合理的单轮回答,却未必能复现真实交互中的意图演变和结果,TRACER 旨在让模拟用户行为与真实交互轨迹对齐。

TRACER 如何训练?

先对真实用户对话做监督微调,再进行多轮强化学习;强化学习阶段结合结果级与轨迹级的层级奖励,并使用偏差感知优势调节,以缓解长对话中的奖励稀疏和信用分配问题。

论文的主要实验结果是什么?

TRACER-7B 在真实客服会话中转化 F1 超过最强基线 11.4,组级转化率误差和语义轨迹距离最低,可泛化到分布外场景;人类图灵测试识别准确率接近随机水平;Dynamic Marketing Benchmark 还发现回答质量高不一定转化率高。

打开原文

更多资讯

反对密码学末日论金色财经 · 10/10 20:30前8个月我国软件业务收入超10万亿元36氪 · 10/10 11:20未经批准含有“金融控股”等字样 三家企业被要求整改36氪 · 10/10 16:44腾讯入股墨奇智能36氪 · 10/10 17:05唐山港:1—9月预计累计完成货物吞吐量1.89亿吨,同比增长5.06%36氪 · 10/09 19:02近期海外进出口传闻的政策限制对公司是否有影响? 天孚通信回应36氪 · 10/09 20:45商务部:中欧双方以符合世贸组织规则的方式就混动汽车贸易达成谅解36氪 · 10/09 19:21近1亿美元加密资产被盗 Ledger钱包被盗事件疑云重重金色财经 · 10/10 15:25陶哲轩转发抵制声明,数学界和OpenAI彻底撕破脸爱范儿 / APPSO · 10/09 18:21App工厂,才是AI时代最被低估的生意人人都是产品经理 · 10/10 14:59原 TRAE 负责人石扬离职创业,联手前字节数据安全负责人傅越做 AI 办公,首轮估值 2 亿美元人人都是产品经理 · 10/10 14:30机构:预估2031年VCSEL市场需求量将有望达到6.5亿颗36氪 · 10/10 12:52亚马逊云科技在 Aurora DSQL 中引入外键约束InfoQ 中文 · 10/11 03:00里程碑时刻!比亚迪第15万台新能源商用车下线雷峰网 · 10/10 12:08梅赛德斯-奔驰美国公司召回30064辆汽车36氪 · 10/10 16:25外交部副部长马朝旭同澳大利亚外交贸易部秘书长安思捷举行中澳外交部政治磋商36氪 · 10/10 11:10我国成功发射卫星互联网低轨27组卫星36氪 · 10/10 09:14内蒙古:全区所有水泥熟料生产线11月起实施共5个月实行错峰生产36氪 · 10/10 17:52早报|供应链回应iPhone 18 Pro砍单传闻/小米、华为手机同日调价/山姆拟限制亲友卡换绑爱范儿 / APPSO · 10/10 08:14受内存、存储芯片短缺推高价格,游戏硬件销量跌至13年新低36氪 · 10/10 10:20字节凶猛:从招聘看字节AI战略战术背后的逻辑与细节人人都是产品经理 · 10/10 14:41DeepSeek Harness 桌面端来了!带你拆解核心机制人人都是产品经理 · 10/10 14:49Grayscale:低成本智能体AI将推高算力需求金色财经 · 10/10 08:48谷歌正在内测新 AI 模型,员工称其编码能力和 Claude Opus 5.5 打平开源中国 · 10/10 17:08七部门:构建电商出海良好生态36氪 · 10/10 10:18用AI降低激光焊使用门槛,这家公司完成数千万元融资|36氪首发36氪 · 10/10 10:26兰博基尼、保密协议 Ledger被盗事件疑点重重金色财经 · 10/10 15:34上海国际航运研究中心:预计四季度航运市场发展趋势将保持稳定36氪 · 10/10 15:425 万 star 的 REA:把逆向工程变成 agent 的一项本地能力开源中国 · 10/10 14:2924 天估值暴涨 37 倍,这就是 AI 圈年度爽文爱范儿 / APPSO · 10/10 17:11