量子位 发布于 09/10 15:57

全球首个可仿真的人–场景交互重建框架 HSImul3R:让人类视频真正成为机器人技能来源

查看原文

资讯摘要

大晓机器人联合南洋理工大学 S-Lab、上海人工智能实验室发布全新人–场景交互重建研究 HSImul3R

AI 摘要

大晓机器人联合南洋理工大学 S-Lab、上海人工智能实验室发布人–场景交互重建框架 HSImul3R,已被 ECCV 2026 接收。该框架提出物理闭环双向优化机制,将重力稳定性、真实接触与交互稳定性纳入重建标准,并构建 HSIBench 基准。三档任务交互稳定率显著优于 HSfM,三维穿模率从 69.51% 降至 22.90%,并将优化后的人体动作迁移至 Unitree G1 人形机器人。

AI 问答

HSImul3R 想解决什么问题?

它针对三维视觉中长期存在的感知—仿真鸿沟,让重建结果不仅视觉上正确,还能在物理仿真中保持重力稳定、真实接触与交互稳定。

HSImul3R 的核心方法是什么?

它提出物理闭环双向优化框架:一方面用面向场景的强化学习优化人体运动,使其与当前场景稳定交互;另一方面用直接仿真奖励优化(DSRO)借助仿真反馈反向修正三维场景。

HSImul3R 的效果如何?

在 Easy、Medium、Hard 三档任务中交互稳定率为 53.68%、30.56% 和 13.92%,高于 HSfM 的 10.52%、4.50% 和 2.66%,人–场景三维穿模率从 69.51% 降至 22.90%。

打开原文

更多资讯

“裁判”不想给阿莫迪吹暂停金色财经 · 09/15 13:07主题演讲:破界·量子计算迈向产业深水区——量子计算的下一公里|36氪2026产业未来大会36氪 · 09/15 15:49Stella:“显化”想要的人生,60天35万美元月收入人人都是产品经理 · 09/16 14:09就业率砍半,年轻人靠什么翻盘?AI时代,这三点越早做越好人人都是产品经理 · 09/15 16:12Python 拥抱 RISC-V:CPython 正式纳入 Tier 3 平台InfoQ 中文 · 09/15 22:34AI健康走进百姓餐桌,蚂蚁阿福推出AI饮食分功能雷峰网 · 09/16 15:20OpenAI 总裁:AGI 已经发生金色财经 · 09/15 22:25夜晚睡眠光照太亮可能会损伤心脏Solidot · 09/16 00:45派早报:豆包发布手机助手消费者版,绿联发布首款雷电 5 显卡坞等少数派 · 09/15 08:06这种国民鱼一直被低估、被当廉价鱼!现在才知道钙和 DHA 这么多!快试试果壳网 · 09/15 22:15理想落幕:加密行业为何集体走向同质化?金色财经 · 09/15 18:31黄仁勋再谈AI危险论:中国会成为全球开源重要力量金色财经 · 09/16 17:23支付宝 xUI -- “阿宝”背后的 Agentic 终端交互引擎InfoQ 中文 · 09/16 02:27GPT-6 Astra实现具身智能突破 中国如何打具身防卫战金色财经 · 09/16 14:58Firefox 156 释出Solidot · 09/16 14:25字节跳动CEO梁汝波:豆包、飞书与火山引擎整合后 将加大企业市场投入雷峰网 · 09/15 11:45字节将发布独立智能网盘“ADrive”,腾讯网盘先已布局,网盘AI大战打响人人都是产品经理 · 09/15 18:27Claude在英伟达内部被限用,黄仁勋告诉特朗普:我们不会让AI发展放缓发生InfoQ 中文 · 09/16 00:01别闹,几粒盐就能立起高脚杯?你是不是用胶水了?果壳网 · 09/15 14:15西门子不造机器人,为什么机器人进厂的故事里总有它?量子位 · 09/16 15:38Anew Labs已完成 2.9 亿美元融资,红杉中国、高瓴、IDG、五源、高榕等参与雷峰网 · 09/16 14:28NVIDIA中国开发者日定档10月苏州,现场设认证考试与黑客松决赛Solidot · 09/15 14:44开学季 | 学生理财的三条建议,学生党也可以一样理财少数派 · 09/15 11:10一年28倍妖王:谁在爆炒?金色财经 · 09/15 21:03Optimizing cost and latency with Amazon Bedrock prompt cachingAWS Machine Learning Blog · 09/16 00:18一张GPU跑10万原子!分子之心用AI把化学反应“拍”成了电影量子位 · 09/15 17:589月21日,深圳前海!聊聊工业AI与生态共创的下一步量子位 · 09/15 13:20只会搜关键词还不够,Agent 需要一套更聪明的本地搜索人人都是产品经理 · 09/15 16:17美股太贵 该加仓新兴市场吗?金色财经 · 09/16 18:57高通技术公司携手中兴努比亚和豆包手机助手,共同推动智能手机迈入个人AI新时代量子位 · 09/16 16:18