無(wú)論用戶正在進(jìn)行傳統(tǒng)的語(yǔ)音通話還是網(wǎng)絡(luò)通話，當(dāng)用戶的語(yǔ)音進(jìn)入驍龍865終端的麥克風(fēng)并傳入驍龍865集成的第五代Qualcomm AI Engine時(shí)，有道實(shí)時(shí)翻譯就會(huì)馬上開始運(yùn)行。在翻譯的過(guò)程中，驍龍865會(huì)喚醒Qualcomm傳感器中樞（Sensing Hub）來(lái)消除噪聲和回聲，然后啟動(dòng)Hexagon處理器進(jìn)行神經(jīng)網(wǎng)絡(luò)處理，這主要包括以下三個(gè)階段：

1、 自動(dòng)語(yǔ)音識(shí)別（ASR）——以英文來(lái)舉例，通過(guò)在Hexagon處理器上運(yùn)行卷積神經(jīng)網(wǎng)絡(luò)（CNN），用戶的英文語(yǔ)音可以被轉(zhuǎn)錄為英文文字。

2、 神經(jīng)網(wǎng)絡(luò)機(jī)器翻譯（NMT）——接下來(lái)，英文文字能夠通過(guò)神經(jīng)網(wǎng)絡(luò)機(jī)器翻譯轉(zhuǎn)換成中文文字。這不僅僅是逐字翻譯，而是結(jié)合語(yǔ)句結(jié)構(gòu)的翻譯。Hexagon處理器能夠助力有道算法更好的理解兩種語(yǔ)言之間語(yǔ)句結(jié)構(gòu)的區(qū)別，以及詞語(yǔ)在不同語(yǔ)境中可能具有的不同含義。

3、 文字轉(zhuǎn)語(yǔ)音——最后，神經(jīng)網(wǎng)絡(luò)機(jī)器翻譯出的中文文字會(huì)轉(zhuǎn)化為普通話語(yǔ)音。

值得關(guān)注的是，上述處理過(guò)程全部都能夠在終端側(cè)實(shí)時(shí)地進(jìn)行，這讓跨語(yǔ)言交談?wù)嬲�變得輕松自如。

實(shí)時(shí)翻譯的未來(lái)

目前，有道實(shí)時(shí)翻譯技術(shù)支持包括普通話、英文在內(nèi)的多種語(yǔ)言。未來(lái)，該技術(shù)甚至可以扮演口譯員的角色，在人們面對(duì)面交談時(shí)進(jìn)行翻譯。

在5G技術(shù)的支持下，實(shí)時(shí)翻譯將會(huì)以更具沉浸感的方式呈現(xiàn)在人們的生活中。例如，由新一代無(wú)線通信和驍龍5G終端賦能的超低時(shí)延技術(shù)能夠在視頻電話中支持面部識(shí)別，這帶來(lái)的不僅僅只是聲音同步，而是逼真的口型同步，對(duì)方就連看起來(lái)也像是正在使用與用戶相同的語(yǔ)言進(jìn)行對(duì)話。

Qualcomm Technologies希望幫助全世界進(jìn)行連接、計(jì)算和溝通。這也是為什么我們很高興能夠與有道合作，并打造能夠幫助人們克服語(yǔ)言障礙的技術(shù)。我們很榮幸可以與合作伙伴一起豐富用戶體驗(yàn)，共同架起全世界溝通的橋梁。

Qualcomm驍龍、Qualcomm人工智能引擎AI Engine、Qualcomm Hexagon和Qualcomm傳感器中樞是Qualcomm Technologies， Inc．和／或其子公司的產(chǎn)品。