量子位 发布于 09/02 09:07

李飞飞发布:全球首个多模态世界模型

查看原文

资讯摘要

一张图补全3D世界,还能给机器人造训练场

AI 摘要

李飞飞团队World Labs发布全球首个多模态世界模型Atlas,可基于图片生成视频与3D场景,支持像素级相机控制、空间重建和时空模拟。该模型采用多模态自回归扩散Transformer架构,在相机控制和3D重建任务上超越现有模型,并能为机器人提供Real-to-Sim训练环境,目前开放早期访问。

AI 问答

Atlas是什么?

Atlas是World Labs发布的全球首个多模态世界模型,能生成具有像素级相机控制的视频、完成3D重建,并支持机器人模拟训练。

Atlas采用什么技术架构?

它采用多模态自回归扩散Transformer,原生处理文本、图像、视频、3D深度图等数据,具备跨模态序列建模能力。

Atlas对具身智能有什么意义?

它可以仅凭几张照片生成逼真的RGB和深度数据,为机器人提供更多模拟训练空间,是Real-to-Sim的一步。

打开原文

更多资讯

8点1氪丨8月一线城市房价上涨;携程上架510万一张的太空旅行船票;字节跳动上半年净利润出现下滑,但海外收入占比再创新高36氪 · 09/16 08:01高通技术公司携手中兴努比亚和豆包手机助手,共同推动智能手机迈入个人AI新时代量子位 · 09/16 16:182nm天玑9600 Pro,把旗舰SoC竞争推向「融合计算」雷峰网 · 09/16 18:02首个AIGC长片大赛!RunningHub单项大奖100万,科幻IP免费改编量子位 · 09/15 15:48超越代币化:让RWA在链上真正有用金色财经 · 09/16 16:39超级智能体“迪迪虾”上车,比亚迪携手阿里云推进智能座舱升级雷峰网 · 09/15 11:58How NVIDIA NVLink 6 Delivers Multi-Layer Resiliency for AI FactoriesNVIDIA Technical Blog · 09/16 00:55香港第一、全球第八:OSL进化背后的数字资产新格局金色财经 · 09/16 21:42探秘柬埔寨,千年吴哥窟少数派 · 09/16 17:33微软 CEO 纳德拉:AI 应用的机会正在变大,模型成本将继续下降人人都是产品经理 · 09/16 11:48美联储今起议息 沃什或成关键一票金色财经 · 09/15 15:19Mozilla 报告称中国开放权重模型与美国前沿模型仅相差 4.4 个月Solidot · 09/16 18:30早报|雷军同日到访宇树与B站/罗永浩差评带来流量,野人先生单日涨粉近3万/鸿蒙智行确认问界合作调整,赛力斯主导爱范儿 / APPSO · 09/16 08:45以太坊 2026 年第二季度报告金色财经 · 09/15 17:06GPT-6 Astra 之后,产品经理需要重新设计人在流程中的位置人人都是产品经理 · 09/16 09:10月之暗面:网传创始人及员工信息系恶意造谣;OpenAI 放弃今年上市;iPhone Duo炒到9万,黄牛贷款欲囤货|AI周报InfoQ 中文 · 09/16 00:07Steam Frame 起售价 1059 美元Solidot · 09/15 14:59耐克和lululemon双双失速,运动品牌进入碎片化时代人人都是产品经理 · 09/15 11:40现在参与以太坊原生质押为什么要先排队一个月?金色财经 · 09/16 21:24Agent开始调用基础设施,Kubernetes准备好了吗?InfoQ 中文 · 09/16 04:38电商对账的设计逻辑:四层核对,逐层下钻人人都是产品经理 · 09/16 14:36实时互动、实时改视频、探索空间视频,Vidu S2一次放了三个大招量子位 · 09/16 10:58HIP-3:昂贵的入场券 买不来的护城河金色财经 · 09/15 09:48担心代码被拿去训练!英伟达:限制员工使用 Claude;一汽将成广汽第二大股东!南北丰田拟合并;苹果回应「iPhone 18 Pro破发」雷峰网 · 09/15 08:23vivo Buds Clip 体验:42 小时续航的无感佩戴,音质好也舒服爱范儿 / APPSO · 09/16 13:55“阿宝”交新朋友:携手比亚迪“迪迪虾”,实现车机端一句话办事雷峰网 · 09/15 16:45AMC 炮轰 Robinhood:股票归谁做主?金色财经 · 09/15 21:18缓存不该困在一台服务器里InfoQ 中文 · 09/16 07:00贝森特回购落空与通胀重压 美联储加息或全面开启金色财经 · 09/15 11:06NVIDIA中国开发者日定档10月苏州,现场设认证考试与黑客松决赛Solidot · 09/15 14:44