MotionShop阿里推出的AI角色动画项目,一键替换视频人物为3D虚拟角色

贰柒AI 2024-08-18 13:15:16

MotionShop是阿里巴巴智能研究院推出的一个AI角色动画框架,

可以将视频中的人物角色替换为3D化身,同时不改变视频中的其他场景和人物。

MotionShop框架由两部分构成,一个是用于提取修复背景视频序列的视频处理流程,

另一个是用于生成3D虚拟角色视频序列的姿态估计和渲染流程。

本项目已经开源,大家可以去github下载到本地部署,或者使用在线Demo体验。

最近手机端也已经上线,大家可以下载通义APP使用。

今天我使用魔搭社区来给大家演示一下。

进入魔搭社区,我们点击上传包含人物的需要转换的视频。注意视频要控制在30秒以内,且人物最好是全身图

在下方选择需要替换的虚拟形象,MotionShop提供了许多虚拟形象供我们选择。

有机器人,二次元,奥特曼等。角色还是挺丰富的。

它会自动读取我们上传视频的参数,然后会根据视频内容把我们想要替换的人物框选出来。

全部设置完毕我们点击生成视频,每次生成预估都在5分钟左右。

经测试我们最好选择一镜到底的人物视频,而且人物自身不要有多余的配饰。

使用这款工具来做一些整活视频效果奇好。

感兴趣的小伙伴可以根据自身条件选择使用。

0 阅读:5

贰柒AI

简介:专注AI领域,每天分享新鲜好玩的AI工具,全网同名