黄渤用青岛话演绎华为月球大片,小艺方言自由说给你全新交互体验

研究玩点科技事 2024-08-21 01:37:45

近日,华为最新上线了Mate 60 Pro月球主题宣传片《月球,从未如此Mate》,延续了2018年Mate 20《一张来自太空的照片.jpg》及2022年Mate 50《重返月球的Mate》的故事主线,续写了宇航员小马的太空“囧事”。影片以宇航员小马的自述形式,全程用青岛话来讲述他在月球完成任务却“事故”频频的爆笑故事,小马由知名演员黄渤出演,全程使用青岛方言,以强烈的反差感为短片增添了妙趣横生的戏剧性。

《月球,从未如此Mate》视频截图

十种方言自由说,小艺助力方言传承

一方水土孕育一方文化,不同方言不仅代表着多样的地域文化,更象征着华夏文明多元的文化底蕴,调研显示,截止2022年,全国普通话普及率为80.72%,仍有约五分之一的人口主要使用方言进行日常交流。为了助力方言保护,更好地进行文化传承,小艺自2021年起就已经支持方言交互,满足了许多习惯说方言的用户群体的需求。

经过长期技术沉淀和创新,全新小艺的对话能力进一步提升,除了普通话,还支持四川话、河南话、山东话、东北话、天津话、陕西话、贵州话、河北话、长沙话、粤语等10种方言的对话。用户不用进行方言设置就可以直接使用10种方言中的任意一种向小艺发出指令,不同方言和普通话之间也无需进行切换,小艺能够自适应用户的语音指令,比如常用手机设置、查询天气、拨打电话、导航、百科知识问答等需求,都可以通过小艺来快速完成。

深耕底层技术,方言交互实现新突破

结合了大模型的全新架构,小艺10种方言自由说的识别准确率,相比原有传统方案中的单方言系统,得到显著提升,这主要得益于小艺在研发层面的两个关键技术:语音编码器预训练阶段和大模型语音模态融合阶段。

第一个阶段,语音编码器预训练阶段,通过用海量的语音数据对语音编码器模型进行初始化训练,使得编码器“见过”各种各样的音频,其中就包括了大量的方言数据,先让模型能够“听过”多种方言。

第二个阶段,大模型语音模态融合阶段,是指将训练好的语音编码器和语义大模型结合起来,借助语义大模型强大的语义理解能力,使模型能够“听懂”方言中的内容,将方言准确的转换成文本。此外,在多方言识别的过程中,系统还可以实时判别出用户所说的方言类型,从而针对性的优化方言转文本的准确率,为用户带来对答如流的交互体验。

随着《月球,从未如此Mate》短片上线发布,小艺还在端内特别上线了趣味互动,华为手机用户只要唤醒小艺说出“月球从未如此Mate”,就能调起小艺宇航员动画,拉满登月氛围感。

现在Mate60系列、Pura 70系列等手机系统已升级至HarmonyOS 4.2及以上版本的手机,已经可以体验小艺方言自由说功能。可以预见地是,当前的10种方言自由说只是语音大模型的初步落地应用,除了方言自由说,在大模型能力的加持下,相信小艺还会持续给华为用户带来更多AI新体验,满足更更广泛的用户需求,让我们一起期待!

0 阅读:0

研究玩点科技事

简介:感谢大家的关注