AI生成角色视频,也交出能修改的三维动作:JCA仍不能保证不穿模

字号
iHOLYSHITVISUAL / TECHAI 创作iHOLYSHIT / ILLUSTRATION
iHolyShit 主题示意图

看视频会动,不等于能把动作拿出来修改。这项研究值得关注的是制作流程,而不是“AI第一次做动画”。

AI视频里的角色能跑能跳,却不一定有一套能拿出来编辑的三维动作。NVIDIA参与的Joints, Camera, Action!研究尝试把两样东西一起生成:一段视频,以及控制角色运动的三维骨架。这项预印本首次发表于2026年10月20日,是研究原型,不是11月新上市的软件。

所谓骨架,可以想成藏在数字角色身体里的关节和操纵杆。画面告诉你角色看起来怎样运动,骨架则记录关节怎样转动。对做游戏、动画的人,后者才是能够继续调整的材料;对观众,这个区别相当于只拿到一段木偶表演录像,还是同时拿到木偶的操纵方法。

让AI做三维动画早已有先例。2025年的Puppeteer先为三维模型生成骨架和皮肤权重,再利用视频指导调整动作。皮肤权重就是决定一个关节能带动身体哪些部位、带动多少。它已经把“绑骨”和让角色动起来接在一起,因此不能把这次研究说成AI第一次给模型做动画。

同年的AnimateAnyMesh走了另一条路线:根据文字直接生成三维模型的运动,适配不同形状和连接结构,不必先给模型准备骨架。两条路线也说明,看到一个AI角色会动,远远不足以判断方法是否有新意。

JCA的具体变化,是让视频生成与骨架动作生成在过程中交换信息,而不是先拍板生成视频,再设法让骨架追上画面。它还估计镜头参数,把三维动作对准视频场景。这样有望减少画面表现和可编辑动作各做一套、最后再对齐的工作;这是研究路线的潜力,不代表已经省下了多少制作成本。

限制直接关系到成品能否使用。论文假定镜头不移动,每段只处理一个骨架;系统没有完整的场景三维形状来约束碰撞,因此不能保证脚踩实地面、身体不穿过物体。画面里的其他物体即使会动,也不等于获得了它们的三维动作。游戏和动画制作者仍需检查这些问题。

对普通人,它值得关注的地方是AI开始同时交出画面与可修改的动作材料。判断后续进展,也应看这些材料能否可靠接进制作流程,而不是只看演示视频是否流畅。

原始预印本提交:北京时间2026年10月21日;美东时间2026年10月20日(EDT)。

编辑时间:2026年11月14日06:36(北京时间);2026年11月13日17:36(美东时间 EST)。

分享这篇文章

你觉得这篇文章怎么样?

匿名评价,无需登录,每篇最多 5 次。

匿名评价

写下你的看法,无需登录。

请围绕科技与文章讨论。禁止仇恨歧视、政治战争话题、威胁辱骂、人身指控、色情、广告、链接及个人信息。

0/500

还没有评价,来说第一句吧。

来源