量子位 发布于 09/16 10:58

实时互动、实时改视频、探索空间视频,Vidu S2一次放了三个大招

查看原文

AI 摘要

量子位报道,生数科技发布Vidu S2视频生成模型,发布当天即全量开放、不限名额。此次升级主要有三点:S2-Editing可对正在播放的视频实时换装、换人、换背景与换画风;S2-Avatar把实时互动输出分辨率从540p提升到720p,并能在互动中接收参考图完成拿取物品等动作;此外还探索实时空间视频,可生成并编辑供VR头显观看的立体视频,文中也介绍了背后的流式训练与强化学习方案。

AI 问答

Vidu S2这次发布了哪三个主要升级?

一是S2-Editing实时视频编辑,可对正在播放的视频换装、换角色、换背景、换风格;二是S2-Avatar,实时互动角色升级到720P并可接收中途递来的参考图;三是实时空间视频探索,可将生成或编辑的视频转成左右眼画面送入VR头显。

Vidu S2如何实现视频“边播边改”?

通过重新设计位置编码,把参考图的注入位置与时间戳对齐,让模型知道新条件从哪个时间点开始生效;同时使用Backbone-Refiner两阶段架构和异步流水线,在720P输出下仍保持不掉帧。

Vidu S1到Vidu S2间隔了多久?

仅用了69天,就完成了一次大版本跃迁。

打开原文

更多资讯

地平线第1500万颗征程芯片搭载大众 ID. AURA T6,HSD V2.1 即将推出量子位 · 09/15 21:32AI 减速还是不减速:一场周末点燃的行业与政府对垒金色财经 · 09/15 12:06HYROX比赛腹泻这事,运动员拼归拼,但主办方不能装看不见果壳网 · 09/16 23:15做了两年AI落地,我总结了这7点思考人人都是产品经理 · 09/16 11:04CLARITY折戟 多方博弈撕裂行业预期 市场怎么看?金色财经 · 09/16 10:33派早报:豆包发布手机助手消费者版,绿联发布首款雷电 5 显卡坞等少数派 · 09/15 08:06Building AI to accelerate science and improve livesGoogle AI Blog · 09/16 00:00清华稳准智能联合发布LimiX-2,结构化数据基础模型登顶国际评测榜单雷峰网 · 09/16 16:05被用了几千年的铜,怎么突然成了AI时代的新宠?果壳网 · 09/16 16:15OpenAI 总裁:AGI 已经发生金色财经 · 09/15 22:25vivo Buds Clip 体验:42 小时续航的无感佩戴,音质好也舒服爱范儿 / APPSO · 09/16 13:55以太坊 2026 年第二季度报告金色财经 · 09/15 17:062nm天玑9600 Pro,把旗舰SoC竞争推向「融合计算」雷峰网 · 09/16 18:02How NVIDIA Groq 3 LPX Deterministic Execution Drives Power-Efficient High-Interactivity Inference on NVIDIA Vera RubinNVIDIA Technical Blog · 09/16 00:55上市前交易市场:永续合约化的Pre-IPO资产金色财经 · 09/16 09:21Arc主网上线 生态内有哪些项目?金色财经 · 09/16 17:39AI风口之下,明星们又想“挤上”牌桌了人人都是产品经理 · 09/15 09:15Denuvo 起诉黑客违反 DMCA 反规避条款Solidot · 09/16 23:27Dense vs. MoE Models: Active Parameters, Throughput, and When to Choose EachNVIDIA Technical Blog · 09/16 01:00AI没有泡沫 只有割裂金色财经 · 09/15 21:38当罗永浩站在群众的对立面人人都是产品经理 · 09/15 11:35百度做了一堆AI产品,却没有一个能代表百度?人人都是产品经理 · 09/15 18:31圆桌:探路·产业分工的新图谱,看到新未来——国家力量如何转化为产业价值 | 36氪 2026产业未来大会36氪 · 09/15 17:39比 MEGA Home 便宜 14 万!理想 i9 Home 上市定价 36.98 万元,六座旗舰变天了爱范儿 / APPSO · 09/16 23:21AWS 称无法恢复中东部分可用区资源和数据的访问Solidot · 09/16 23:11云连锁到轻连锁,品牌业务逻辑的改变人人都是产品经理 · 09/16 11:47把记忆交给CPU,大模型会变快量子位 · 09/16 11:07从”边卖边补”到”准备好再卖”:产品商品化的四步闭环人人都是产品经理 · 09/15 14:11Agent开始调用基础设施,Kubernetes准备好了吗?InfoQ 中文 · 09/16 04:38清华稳准智能联合发布LimiX-2,结构化数据基础模型登顶国际评测榜单量子位 · 09/16 14:32