雷峰网 发布于 08/28 15:17

大晓联合香港大学发布StreamPI,让 VLA 真正理解时间,迈向连续物理智能

查看原文

资讯摘要

  当 VLA 模型理解语言、感知环境并直接生成机器人动作,一个更基础的问题开始浮现:机器人如何理解一个持续变化的物理世界?物体从哪里移动而来、杯子此前遮住了什么、机械臂正在接近还是远离目标——真正决定下一步动作的信息,往往不只存在于当前一帧,而存在于连续的时间之中。

AI 摘要

大晓机器人联合香港大学发布StreamPI,为VLA模型引入连续时序建模能力,通过指令持续锚定、历史信息流式缓存与随机时间间隔训练,使机器人理解状态变化与时间演进。实验显示其在LIBERO、CALVIN及真实任务中显著提升时序记忆与精细操作成功率,推动具身智能从空间智能迈向时空智能。

AI 问答

StreamPI与传统的VLA模型有何不同?

传统VLA主要依据单帧图像独立决策,StreamPI通过持续的多模态时序建模,让模型记住历史观测并理解状态变化,为动作决策补充时间维度。

StreamPI如何避免重复计算历史视觉信息?

StreamPI采用流式推理,首帧编码后存入键值缓存,后续仅处理新信息并直接调用历史表示,无需重复计算整个观测窗口,且不增加额外模型参数。

打开原文

更多资讯

圆桌:智能向实,产业向新——AI如何进入真实世界 | 36氪 2026产业未来大会36氪 · 09/15 18:00无效的管理者和疲惫的基层:浅论考核指标的漂移人人都是产品经理 · 09/16 15:06高通技术公司携手中兴努比亚和豆包手机助手,共同推动智能手机迈入个人AI新时代量子位 · 09/16 16:18Build a serverless PII redaction pipeline with Amazon Bedrock Data AutomationAWS Machine Learning Blog · 09/16 23:17潘功胜最新文章:深刻认识中国金融结构变迁(全文)金色财经 · 09/16 13:28做了两年AI落地,我总结了这7点思考人人都是产品经理 · 09/16 11:04Java新闻汇总:Simple JSON API、GlassFish、Jakarta EE、JNoSQL和Open Liberty、LangChain4jInfoQ 中文 · 09/16 19:06早报|iOS27正式推送/比亚迪高管:燃油车在中国没有未来/iPhone 18 Pro渠道降价900元,苹果称不干预爱范儿 / APPSO · 09/15 08:08OpenAI万亿IPO推迟背后 四本账与三条投资路径金色财经 · 09/16 11:27Robinhood的财富效应金色财经 · 09/16 12:47地平线第1500万颗征程芯片搭载大众 ID. AURA T6,HSD V2.1 即将推出量子位 · 09/15 21:32Denuvo 起诉黑客违反 DMCA 反规避条款Solidot · 09/16 23:27从”边卖边补”到”准备好再卖”:产品商品化的四步闭环人人都是产品经理 · 09/15 14:11让AI真正赋能企业(初探)人人都是产品经理 · 09/15 17:20梁文锋CFO到位!投过智谱MiniMax量子位 · 09/15 21:53GPT-6 Astra 之后,产品经理需要重新设计人在流程中的位置人人都是产品经理 · 09/16 09:10美国加密新规又黄了金色财经 · 09/16 20:21AI没有泡沫 只有割裂金色财经 · 09/15 21:38OpenAI 总裁最新采访:现在所有人对 AI 的预测,大概率都是错的人人都是产品经理 · 09/15 16:19Grayscale:比特币能否优化私募市场投资组合?金色财经 · 09/15 09:10产品观察丨xTool做了一台3000元起步的激光雕刻机,难的不只是价格36氪 · 09/16 10:40和Jeff Dean押注同一方向,27岁清华助理教授创业,两个月融资数亿36氪 · 09/16 15:58美股太贵 该加仓新兴市场吗?金色财经 · 09/16 18:57芯片从业者拆解OpenAI造芯,还能再快3个月?雷峰网 · 09/16 18:38OpenAI故意欠技术债,等Codex来还:仅2名工程师,把核心存储从Python重写成RustInfoQ 中文 · 09/16 00:09从200亿收购失败到650亿IPO:Figma如何用“协作”颠覆设计帝国人人都是产品经理 · 09/16 11:30夜晚睡眠光照太亮可能会损伤心脏Solidot · 09/16 00:45Python 拥抱 RISC-V:CPython 正式纳入 Tier 3 平台InfoQ 中文 · 09/15 22:34Introducing Gemini 3.8 Live and 3.8 Live Extended ThinkingGoogle DeepMind Blog · 09/16 01:05华为坤灵升级“4+10+N”场景化方案,发布“经纬计划”和50个样板点雷峰网 · 09/16 17:27