当下时代,越来越多的深度学习推理任务从云端转移到移动端,移动平台上的深度学习推理场景需要解决硬件平台、驱动、编译优化、模型压缩、算子算法优化和部署等诸多问题,而现有的推理平台与第三方库和硬件平台又通常存在驱动适配、模型验证、数据交互等问题,从而导致对应的优化部署和维护升级过程繁琐。同时,移动平台对图形图像类应用的实时性和功耗要求也越来越高。
(OPPO)
为了解决这些问题,最近OPPO就宣布向LF AI&Data基金会无偿捐赠一项AI项目——ShaderNN,它是业界首个支持OpenGL和Vulkan全图形栈的高效轻量推理引擎,面向移动端图形、图像、游戏实时AI应用。专注于通过GPU着色器进行推理加速,基于原生OpenGL ES和Vulkan构建,可以轻松与图形渲染管线深度集成,最大限度地利用计算资源,具有通用性、高性能、可移植性、可扩展性,推理时间及平均功耗比同行业推理引擎在典型场景有显著优势。
(Vulkan)
据悉ShaderNN加入LF AI&Data基金会沙箱项目后,通过在基金会内部的合作,可以为开发者带来更快捷的开发体验,让手机用户获得更流畅、更沉浸真实的体验。
说到沉浸的体验,其实近年为了提升用户的游戏感受,OPPO还做出了很多的努力,去年OPPO就在第五届中国国际进口博览会“Unity元宇宙生态论坛”上宣布与全球实时3D引擎巨头Unity达成战略合作,双方将着力提升游戏画质及流畅性,为用户打造更具沉浸感的游戏体验,同时也为开发者提供高效率的开发环境,共建更加开放友好的游戏生态。
(OPPO软件战略总监张峻现场展示OPPO与Unity合作的技术成果)
像OPPO和Unity就在光线追踪上进行了合作,OPPO将自研光线追踪算法集成到了Unity游戏开发引擎中,打造游戏中真实的光影体验。据悉OPPO自研光线追踪算法通过模拟光的物理行为,能够展现实时动态阴影、曲面反射、玻璃体折射等,极大的提升真实感渲染效果,对于游戏体验提升有很大的帮助。
(左:有光线追踪的画面,右:没光线追踪的画面)
此外,OPPO在其它领域也是有着丰硕的成果。像OPPO的智能眼镜OPPO Air Glass此前就凭借创新设计与自研技术脱颖而出,在美国佛罗里达州举行的爱迪生颁奖典礼被授予2023年爱迪生最佳新产品奖™AR产品赛道银奖,OPPO Air Glass还曾斩获22年红点设计大奖和IF设计大奖,备受行业肯定。
(OPPO Air Glass)
OPPO之所以能够在手机行业,以及多个领域取得一定的成就,离不开其对技术研发的重视。据悉截至目前,OPPO全球专利申请量已经超过90000件,全球授权数量超过46000件,PCT申请量全球TOP6,5G专利族宣称量全球TOP8,专利实力不言而喻。因此这也让我们坚信,在未来的发展过程中,OPPO一定还会给我们带来更多让人惊喜的产品,同时OPPO也将继续与全球开源社区建立更深入的合作,通过前沿技术的可持续发展与不断落地,造福更多消费者,大家不妨拭目以待吧。