在《王者榮耀》等多人競(jìng)技游戲中，語(yǔ)音溝通是團(tuán)隊(duì)配合的核心。但網(wǎng)絡(luò)不穩(wěn)定、噪聲環(huán)境等問(wèn)題會(huì)影響識(shí)別準(zhǔn)確度。

「端側(cè)語(yǔ)音識(shí)別」技術(shù)——在本地直接進(jìn)行語(yǔ)音轉(zhuǎn)文字，就可以降低網(wǎng)絡(luò)帶來(lái)的影響。但「端側(cè)語(yǔ)音識(shí)別」對(duì)設(shè)備的算力、功耗與實(shí)時(shí)性都有更高的要求。

基于此，MediaTek與《王者榮耀》、騰訊GVoice團(tuán)隊(duì)三方深度合作，依托天璣9500旗艦芯片強(qiáng)大的端側(cè)AI算力，將語(yǔ)音轉(zhuǎn)文字落地到本地實(shí)時(shí)運(yùn)行，讓玩家「開(kāi)口即成字、溝通更順暢」。

讓團(tuán)戰(zhàn)溝通更實(shí)時(shí)

王者榮耀端側(cè) ASR 的落地突破

為何「端側(cè)語(yǔ)音識(shí)別」對(duì)于《王者榮耀》尤為關(guān)鍵？《王者榮耀》在處理不同復(fù)雜場(chǎng)景中海量用戶語(yǔ)音數(shù)據(jù)的同時(shí)，還需考慮大量不同型號(hào)手機(jī)的聲學(xué)差異。因此，將語(yǔ)音識(shí)別遷移到設(shè)備端，保障可靠的實(shí)時(shí)轉(zhuǎn)寫(xiě)，是《王者榮耀》持續(xù)提升用戶體驗(yàn)的一大關(guān)鍵。

因此，騰訊游戲 GVoice 團(tuán)隊(duì)在軟件層面將 ASR 模型在端側(cè)落地，完成了三大核心問(wèn)題優(yōu)化：

除了軟件層面的優(yōu)化，想要將端側(cè)語(yǔ)音識(shí)別真正落地，就離不開(kāi)硬件設(shè)備的支持。因此，MediaTek 與《王者榮耀》、騰訊游戲 GVoice 團(tuán)隊(duì)，三方聯(lián)合基于天璣 9500 旗艦芯實(shí)現(xiàn)了面向游戲用戶的三大關(guān)鍵突破：

天璣 9500 旗艦芯內(nèi)置AI 處理器 NPU 990通過(guò)輕量化和混合精度推理架構(gòu)，讓端側(cè)模型以更優(yōu)的存儲(chǔ)與能耗表現(xiàn)穩(wěn)定運(yùn)行語(yǔ)音識(shí)別任務(wù)，確保模型能夠在本地實(shí)現(xiàn)實(shí)時(shí)推理，滿足游戲長(zhǎng)時(shí)運(yùn)行場(chǎng)景對(duì)能效的嚴(yán)苛要求。

從語(yǔ)音到多模態(tài)

天璣 9500 推動(dòng)端側(cè) AI 全面開(kāi)花

端側(cè)語(yǔ)音識(shí)別只是天璣 9500 旗艦芯端側(cè) AI 的眾多落地成果之一，其高能效設(shè)計(jì)讓 AI 能力得以常駐運(yùn)行，支持 4K 文生圖和超高分辨率圖像處理等先進(jìn)生成式體驗(yàn)，并延展至游戲、影像到辦公協(xié)作等豐富應(yīng)用場(chǎng)景。主要包括：

多模態(tài)識(shí)別：圖像 + 音頻 + 文本的綜合理解能力

主動(dòng)式AI：能夠?qū)崟r(shí)理解場(chǎng)景與觸發(fā)響應(yīng)

實(shí)時(shí)助理：AI 實(shí)時(shí)字幕、會(huì)議記錄、助理類能力

在這些 AI 功能的基礎(chǔ)上，天璣 9500 旗艦芯進(jìn)一步賦能更多端側(cè) AI 應(yīng)用，例如已在手機(jī)端實(shí)現(xiàn)的 AI 意圖搜索、AI 識(shí)圖、AI 錄音、AI 定制美顏等等，與合作伙伴發(fā)展出了一整套從芯片算力、模型優(yōu)化，再到系統(tǒng)適配及應(yīng)用開(kāi)發(fā)的全面 AI 生態(tài)。

AI 與性能雙躍升

打造旗艦級(jí)端側(cè) AI 體驗(yàn)

天璣 9500 旗艦芯集成的AI 處理器 NPU 990，是端側(cè)生成式 AI 在手機(jī)上全面落地的關(guān)鍵。

相比上一代，其性能提升達(dá) 111%，峰值功耗下降 56%，在架構(gòu)層面對(duì)生成式 AI 進(jìn)行了深度優(yōu)化，并原生支持 BitNet 1.58bit 與生成式 AI 引擎 2.0，使大模型推理更輕量、更高效，也為多模態(tài)理解、實(shí)時(shí)生成等場(chǎng)景提供了更強(qiáng)算力保障。

此外，天璣 9500 旗艦芯采用 3nm 工藝、全大核 CPU 與新一代 GPU，還構(gòu)建了強(qiáng)能效調(diào)度系統(tǒng)，確保 AI 推理與游戲等高負(fù)載任務(wù)并行時(shí)依舊維持性能與能耗的最佳平衡。通過(guò)面向端側(cè)模型優(yōu)化的 NPU、高帶寬、多級(jí)緩存與快速內(nèi)存訪問(wèn)機(jī)制，減少數(shù)據(jù)在處理鏈路中的延遲與功耗。

同時(shí)，MediaTek 與生態(tài)伙伴共同完成模型訓(xùn)練與適配，使芯片能力能夠順暢接入用戶實(shí)際應(yīng)用，真正賦能廣泛生態(tài)伙伴，讓端側(cè) AI 的先進(jìn)能力可以規(guī)?；?、實(shí)時(shí)地落地在每一臺(tái)設(shè)備中。

從《王者榮耀》端側(cè)語(yǔ)音識(shí)別率先落地，到更多應(yīng)用場(chǎng)景的加速普及，MediaTek 正在讓端側(cè) AI 真正走進(jìn)玩家與用戶的日常生活，推動(dòng)行業(yè)邁向更智能、更沉浸的新時(shí)代！