PRAGMA 是什么?
PRAGMA 是一个用于评估长期对话中个性化指导能力的基准,包含纵向对话历史、证据标注和指导场景。
(翻译)PRAGMA:评估终身对话中基于记忆对齐的个性化指导
Abstract page for arXiv paper 2609.09664: PRAGMA: Evaluating Personalized Guidance with Memory Alignment in Lifelong Conversations
该论文提出 PRAGMA,一个用于评估长期对话中个性化指导能力的基准。它包含精心整理的纵向对话历史、证据标注和指导场景,覆盖用户情境演变与错误假设。实验显示,现有检索系统、记忆系统和长上下文模型在恢复相关对话证据并将其用于个性化指导方面均存在困难,表明需要更强的记忆架构来支持超越证据召回的记忆推理。
PRAGMA 是一个用于评估长期对话中个性化指导能力的基准,包含纵向对话历史、证据标注和指导场景。
长上下文会带来显著计算开销,模型难以持续识别并利用与当前请求最相关的信息。
实验显示,现有检索系统、记忆系统和长上下文模型既难以恢复合适的对话证据,也难以有效利用证据进行个性化指导。
一边喊停一边敲钟:硅谷AI巨头到底在怕什么Fedora 45 Beta 释出
OpenAI 总裁:AGI 已经发生全球AI视频榜单第一梯队再添中国力量:智象发布首款物理规律导向视频模型
OpenAI 总裁最新采访:现在所有人对 AI 的预测,大概率都是错的Mozilla 报告称中国开放权重模型与美国前沿模型仅相差 4.4 个月
Arc主网上线 生态内有哪些项目?基元律动与无问芯穹达成战略合作,推进高质量Token供给与应用
GPT-6 Astra 之后,产品经理需要重新设计人在流程中的位置廉价太阳能改变世界能源格局
担心代码被拿去训练!英伟达:限制员工使用 Claude;一汽将成广汽第二大股东!南北丰田拟合并;苹果回应「iPhone 18 Pro破发」
飞书与豆包工作合体后首亮相:Agent 能进群,还能帮你写周报、做PPT
豆包工作和飞书,把中国第一个团队 Agent 拉进了工作群日本百岁老人人数首次超过 10 万人华为GTS让Agent学会「看着网络排障」,双防火墙难题几乎全拿下Optimizing cost and latency with Amazon Bedrock prompt caching
Xspark AI 丁文伯:触觉替代不了视觉,但机器人需要一套自己的“脊髓” |物理AI 50人
GPT Image 2.5 对比实测:变化与局限
早报|iOS27正式推送/比亚迪高管:燃油车在中国没有未来/iPhone 18 Pro渠道降价900元,苹果称不干预
GPT-6 Sol要来了?OpenAI本周或迎“发布狂潮”
拼多多链接裂变玩法梁文锋CFO到位!投过智谱MiniMax
当AI能解千禧难题,再次证明答案不再是门槛
CLARITY法案未通过程序性表决 OpenAI拟IPO前融资
129亿美元卖身英伟达之后,是时候重新理解Hugging Face了
CoinEx宣布体面关停:值得肯定但不该神化
AI 负责创造,人来干脏活,这事儿能否停一下?
豆包 2.1 Pro模型更新,已接入豆包工作
百度做了一堆AI产品,却没有一个能代表百度?美国军方首次证实在太空部署了武器