阿里推出Motionshop:一键可将视频中的人物替换成3D模型

做视频很简单 2024-03-06 17:45:42

阿里又来“整活儿”了!这次他们把科技玩出了新高度,通义实验室XR实验室最近发布了一个超级酷炫的AI角色动画模型——MotionShop。

MotionShop这个神器,能让视频中的角色秒变3D!它可不只是简单的替换哦,而是能够完美模仿原视频中人物的动作,保证动作的一致性。想象一下,马保国老师的“闪电五连鞭”被3D化后,是不是更威风凛凛呢?还有那些虚拟偶像跳Kpop女团舞,用MotionShop一处理,简直燃爆全场!

这全靠MotionShop的强大功能。它运用了先进的视频处理和3D渲染技术,能高效地将视频中的特定角色替换为3D人物,同时丝毫不影响视频中的其他场景和人物。无论是人物的动作、表情,还是服装、道具,都能得到完美的呈现。

有了MotionShop,我们的想象力就能无限放大啦!无论是什么角色,无论是怎样的动作,只要你想得到,MotionShop都能帮你实现!这简直就是为创意达人量身打造的神器啊!看到这有人已经迫不及待了,告诉大家目前已在ModelScope社区开放试玩啦。

▍如何使用

目前,MotionShop提供免费试用,使用简单,只需完成以下三个步骤:第一步:上传一个包含人物的视频(请保证人物完整,视频时长不超过15秒)。第二步:选择视频中要替换的人物(自动选择)。第三步:选择要替换的虚拟角色模型并点击生成,等待10分钟即可生成结果。请注意,要求上传的视频是一镜到底,不允许包含镜头切换。

然后就是漫长的排队等待时间了。。。

▍功能原理MotionShop框架由两部分构成,一个是用于提取修复背景视频序列的视频处理流程,另一个是用于生成3D虚拟角色视频序列的姿态估计和渲染流程,通过并行两条线并使用高性能光线追踪染器TIDE,整个视频替换过程可以在几分钟内完成。

▍有兴趣的朋友可戳下方的链接去体验:

项目主页:https://aigc3d.github.io/motionshopDemo 地址:https://modelscope.cn/studios/Damo_XR_Lab/motionshop/summary
0 阅读:0

做视频很简单

简介:感谢大家的关注