近日，華為最新上線了Mate 60 Pro月球主題宣傳片《月球，從未如此Mate》，延續(xù)了2018年Mate 20《一張來(lái)自太空的照片.jpg》及2022年Mate 50《重返月球的Mate》的故事主線，續(xù)寫(xiě)了宇航員小馬的太空“囧事”。影片以宇航員小馬的自述形式，全程用青島話來(lái)講述他在月球完成任務(wù)卻“事故”頻頻的爆笑故事，小馬由知名演員黃渤出演，全程使用青島方言，以強(qiáng)烈的反差感為短片增添了妙趣橫生的戲劇性。

《月球，從未如此Mate》視頻截圖

十種方言自由說(shuō)，小藝助力方言傳承

一方水土孕育一方文化，不同方言不僅代表著多樣的地域文化，更象征著華夏文明多元的文化底蘊(yùn)，調(diào)研顯示，截止2022年，全國(guó)普通話普及率為80.72%，仍有約五分之一的人口主要使用方言進(jìn)行日常交流。為了助力方言保護(hù)，更好地進(jìn)行文化傳承，小藝自2021年起就已經(jīng)支持方言交互，滿足了許多習(xí)慣說(shuō)方言的用戶群體的需求。

經(jīng)過(guò)長(zhǎng)期技術(shù)沉淀和創(chuàng)新，全新小藝的對(duì)話能力進(jìn)一步提升，除了普通話，還支持四川話、河南話、山東話、東北話、天津話、陜西話、貴州話、河北話、長(zhǎng)沙話、粵語(yǔ)等10種方言的對(duì)話。用戶不用進(jìn)行方言設(shè)置就可以直接使用10種方言中的任意一種向小藝發(fā)出指令，不同方言和普通話之間也無(wú)需進(jìn)行切換，小藝能夠自適應(yīng)用戶的語(yǔ)音指令，比如常用手機(jī)設(shè)置、查詢天氣、撥打電話、導(dǎo)航、百科知識(shí)問(wèn)答等需求，都可以通過(guò)小藝來(lái)快速完成。

深耕底層技術(shù)，方言交互實(shí)現(xiàn)新突破

結(jié)合了大模型的全新架構(gòu)，小藝10種方言自由說(shuō)的識(shí)別準(zhǔn)確率，相比原有傳統(tǒng)方案中的單方言系統(tǒng)，得到顯著提升，這主要得益于小藝在研發(fā)層面的兩個(gè)關(guān)鍵技術(shù)：語(yǔ)音編碼器預(yù)訓(xùn)練階段和大模型語(yǔ)音模態(tài)融合階段。

第一個(gè)階段，語(yǔ)音編碼器預(yù)訓(xùn)練階段，通過(guò)用海量的語(yǔ)音數(shù)據(jù)對(duì)語(yǔ)音編碼器模型進(jìn)行初始化訓(xùn)練，使得編碼器“見(jiàn)過(guò)”各種各樣的音頻，其中就包括了大量的方言數(shù)據(jù)，先讓模型能夠“聽(tīng)過(guò)”多種方言。

第二個(gè)階段，大模型語(yǔ)音模態(tài)融合階段，是指將訓(xùn)練好的語(yǔ)音編碼器和語(yǔ)義大模型結(jié)合起來(lái)，借助語(yǔ)義大模型強(qiáng)大的語(yǔ)義理解能力，使模型能夠“聽(tīng)懂”方言中的內(nèi)容，將方言準(zhǔn)確的轉(zhuǎn)換成文本。此外，在多方言識(shí)別的過(guò)程中，系統(tǒng)還可以實(shí)時(shí)判別出用戶所說(shuō)的方言類型，從而針對(duì)性的優(yōu)化方言轉(zhuǎn)文本的準(zhǔn)確率，為用戶帶來(lái)對(duì)答如流的交互體驗(yàn)。

隨著《月球，從未如此Mate》短片上線發(fā)布，小藝還在端內(nèi)特別上線了趣味互動(dòng)，華為手機(jī)用戶只要喚醒小藝說(shuō)出“月球從未如此Mate”，就能調(diào)起小藝宇航員動(dòng)畫(huà)，拉滿登月氛圍感。

現(xiàn)在Mate60系列、Pura 70系列等手機(jī)系統(tǒng)已升級(jí)至HarmonyOS 4.2及以上版本的手機(jī)，已經(jīng)可以體驗(yàn)小藝方言自由說(shuō)功能?？梢灶A(yù)見(jiàn)地是，當(dāng)前的10種方言自由說(shuō)只是語(yǔ)音大模型的初步落地應(yīng)用，除了方言自由說(shuō)，在大模型能力的加持下，相信小藝還會(huì)持續(xù)給華為用戶帶來(lái)更多AI新體驗(yàn)，滿足更更廣泛的用戶需求，讓我們一起期待！