数字人厘里“秀演技”,技术与影视融合的“新可能”

深响 2023-09-28 23:05:37

©️深响原创 · 作者|祖杨

万万没想到,如今数字人已经进化到和真人演员“飙演技”了。

近日,热播剧《异人之下》第24集中,高二壮在为张楚岚提供关键线索前,要求他先描述下烤串的味道,当听到张楚岚沉浸式的描述时,只见特写镜头下的二壮眉头微皱、瞳孔收缩,情不自禁地吞下口水,一系列细微的表情动作让不少网友在弹幕留言:这个新人演技不错!

但其实,高二壮的扮演者并非真人演员,而是阿里大文娱自研的AI超写实数字人“厘里”,这也是国内数字人首次参演真人剧集。厘里参演的片段播出后,在网络上迅速形成热度,#异人之下二壮居然是AI#、#异人之下二壮好惨#、#内娱有AI演员了#连续三天成为热搜话题,引发网友热议。阿里大文娱CTO郑勇透露,有好几位导演和制片人主动找过来了解数字人技术。

数字人厘里在《异人之下》中饰演二壮

异人之下》中饰演二壮" data-times="1" uploaded="1" data-infoed="1" data-width="640" data-height="1137" data-format="png" data-size="1274333" data-phash="69E97BF6249C9211" data-source="outsite" outid="undefined">

数字人并非新鲜事,早期被人熟知的绊爱、初音未来,现在的Soul女团、AI主播,都是数字人的一种。但限于成本和技术,大多数数字人常出现在平面图或者直播间里。而如今厘里参演真人剧集,意味着数字人能打破单一的应用场景,可以进入到更复杂的影视生产流程中,并且能在训练下呈现与真人演员无异的演技,帮助创作者降本增效。

最近,一向低调的阿里大文娱频靠技术出圈。今年七月,AI写真软件妙鸭相机“一夜之间”刷屏朋友圈,展现出AIGC的更多可能性,数字人厘里在《异人之下》的亮相又意味着生成式AI在影视制作上有了新突破,再加上已经被广泛应用的帧享数字化制作技术。从产业链上游的虚拟制作到下游的生活应用,阿里大文娱的技术脉络逐渐浮出水面——以AI为圆心,以影视制作为主线,纵深发展,多点开花。

数字人参演真人剧,一次里程碑式的技术革新

数字人厘里扮演“二壮”角色是天时地利人和的结果。

《异人之下》前期筹备时,导演许宏宇就为二壮一角发愁。原著里,二壮是一位四肢残缺、要靠脑电波和外界交流的异能少女,天然带有虚拟和神秘的特色。主创团队原本计划用传统特效的换脸方式来做,但呈现效果不如预期。

后来许宏宇得知阿里大文娱内部自研了数字人厘里,便生出用数字人扮演二壮的想法。二壮靠脑电波和外界交流,AI数字人来扮演正符合逻辑,再一个是,当下AI技术火热,将其应用到影视生产可能会产生奇效。“数字人演真人剧,让我回想起特效首次出现在影视剧《星球大战》里面的场景,创作者跟很优秀的技术团队一起去研发出一些在过往影视剧里没有过的画面跟技术,是很有意义的尝试。”许宏宇说道。

《星球大战》

但数字人“落地”到影视生产的过程并不容易。

一方面,技术是相对透明的,换脸、CG、换头、AI等技术无论做得多么超现实,与背景总是格格不入,大众经常能一眼识别。所以想让观众“不出戏”,就要突出数字人的“真”,让其能和现实融为一体。尤其是,厘里是在剧集后期阶段参与进去的,数字人的呈现与片场的拍摄并不处于同一时空,“出戏”的可能性进一步增加。

《异人之下》给出了自己的解决方案,一是综合运用CG动画和AI等技术融合解决,二是应用智能光场技术,让人物光、环境光与片场里的光精准匹配,避免后期的硬植入感。

另一方面,数字人演剧与广告代言不同,广告大片或者直播间里的数字人“美就够了”,而在剧里数字人有表情、有肢体动作、有互动,这更接近于真人演员,但数字人在理解演技上又天然比真人演员多了一层屏障。

郑勇透露,拍摄厘里的戏份其实很快,花费时间最长的是前期的演技训练。所谓演技训练,并非单纯看她的表演,而是将技术和表演相结合。比如在参演前,主创团队和厘里一起试了几轮戏来测试技术和表演的可能性:镜头能怼到多近,细节、毛孔有多真实,吞咽的动作、俏皮的表情能做到什么程度,在这个过程中反复探索。在他看来,演技是检验技术的重要标准。

厘里试戏片段

过程虽艰难,但数字人的应用让影视制作的成本和效率得到了明显改善。据了解,相比传统数字人制作,剧中厘里通过AI技术降低了在建模、原画等环节投入的成本和时间,也避免了对动捕技术的依赖,让制作成本降低了80%,效率提升40%。

数字人降本增效是短期的效果,更长远来看,包括数字人在内的技术应用会影响到整个影视生态。

郑勇表示,数字人参演真人剧集,对于阿里大文娱甚至整个行业来说,都有着里程碑式的意义。关键在于能够提质增效。当下的许多特效大片,都是人“堆”出来的,而技术的广泛应用会改善这种局面,带来效率和质量的改变。郑勇同时透露,未来还将推出男数字人“询焱”。

从创作者角度来看,许宏宇认为,过去特效大片需要大预算,常是大导演们的专属,而数字人等AI技术的应用,能让更多有才华的导演,在有限的成本内让想象力落地,用更好的技术,带来更良性的影视生态。

“革新整个行业,这是更重要的事情。”

不止于影视生产,技术布局更纵深、更多元

数字人技术只是阿里大文娱技术革新的一个切面。

作为影视工业化的一个重要环节,虚拟拍摄也成为阿里大文娱的关键发力点。四年前,优酷发布帧享数字化解决方案,通过数字场景在LED屏的投影,真实人物和虚拟场景融为一体,极大减少了后期返工的麻烦。去年,帧享数字化完成2.0升级,可选择场景更丰富,覆盖了天空、海洋、沙漠等极端场景的取景问题;同时针对拍摄场地的问题,帧享2.0在北京、宁波、厦门等地搭建了数字影棚,做到了“剧组在哪里,方案就能迁移到哪里”。

帧享2.0数字化方案

技术沉淀出的能力和工具,不仅使平台自己受益,也能为全行业服务,助推影视工业化的进阶。比如帧享数字化推出了行业内首个开放的数字资产平台,平台内沉淀了超5000条、10000小时的各类窗外景、车外景资产,满足各种虚拟拍摄需求,并有剧集项目实现了100%的资产复用。

纵深发展,横向拓宽。技术边界不设限的阿里大文娱用妙鸭相机迎来了“多点开花”。

最初妙鸭爆火时,伴随着AI人像刷屏的还有一些不解:妙鸭相机是人像写真赛道,本身和阿里大文娱的核心业务(大麦、优酷、阿里影业)的协同性并不高,为什么还要做?其实在郑勇看来,阿里大文娱的定位是“为好内容全力以赴的科技公司”,技术辅助所有的内容生产,而非长视频就只能做长视频。

如今诞生已两个月的妙鸭相机仍在技术迭代。比如新推出的免费版,用户生成数字分身的门槛从上传20张图片缩减到了8张,效果却同样“能打”, 关键在于算法的优化,“我们在AI模型训练过程中通过调整损失函数和训练方式优化算法,让模型具备了更强的生成能力。”郑勇此前表示。

妙鸭相机免费版发布

一直以来,阿里大文娱作为头部平台,积极加码技术布局。今年3月,第十届中国网络视听大会上,阿里大文娱董事长兼CEO樊路远在第十届中国网络视听大会上表示,作为一家“数字技术与优质内容双轮驱动”的视听平台,将始终以推动中国影视工业化进程为己任。

在具体落地过程中,阿里大文娱的技术布局也走出了一条差异化路线:不局限于影视生产,围绕所有的好内容做技术深耕。这样的路径无疑会带来更多的挑战,需要投入更多的人力和精力、试错成本也会变高,但这种模式的好处在于,会有更多的新机会、新赛道诞生:或许下一个“妙鸭”就隐藏其中。

0 阅读:3

深响

简介:全球视野,价值视角。