chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

通過IP模塊實現(xiàn)音頻/語音子系統(tǒng)的設計

星星科技指導員 ? 來源:嵌入式計算設計 ? 作者:Charles Qi ? 2022-06-14 09:11 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

隨著移動游戲和語音觸發(fā)等應用的日益普及,音頻/語音子系統(tǒng)在許多移動片上系統(tǒng) (SoC) 設計中發(fā)揮著重要作用。該子系統(tǒng)的設計必須滿足雙重需求:高性能、高分辨率音頻流處理以及始終在線、低功耗的語音觸發(fā)和識別??啥ㄖ频?a target="_blank">數(shù)字信號處理 (DSP) 和音頻/語音子系統(tǒng)解決方案知識產權 (IP) 模塊可以提供一種經濟高效的方式來開發(fā)和交付高性能音頻/語音產品。

在過去十年中,智能手機和平板電腦的出現(xiàn)推動了相當大的技術創(chuàng)新。高性能音頻和視頻應用對于為這些設備帶來個性化和消費者吸引力至關重要。移動游戲和語音觸發(fā)和識別等新興應用正在將音頻/語音子系統(tǒng)性能的要求推向頻譜的兩個極端。一方面,對高性能、高分辨率的多通道音頻流處理的需求不斷增長。另一方面,需要以極低的功耗始終開啟語音觸發(fā)和語音識別智能。音頻/語音子系統(tǒng)設計必須部署先進的數(shù)字信號處理 (DSP) 技術和架構完善的系統(tǒng)解決方案,以滿足不斷增長的需求。

移動音頻/語音子系統(tǒng)概述

圖 1 顯示了一個具有代表性的移動音頻子系統(tǒng)。該子系統(tǒng)以音頻 DSP 內核為中心,處理主要的音頻數(shù)據(jù)處理,包括對不同壓縮標準的流編碼/解碼、采樣率轉換、前后處理、噪聲抑制、語音觸發(fā)/語音識別等。音頻 DSP 內核可能會或可能不會集成到應用處理器片上系統(tǒng) (SoC) 中。如果它被集成,DSP 內核將是一個卸載處理器,位于 SoC 總線層次結構上,可以訪問 SoC 的主存儲器系統(tǒng)。如果 DSP 未集成,則有專用總線接口將應用處理器 SoC 連接到獨立 DSP。MIC 和揚聲器等音頻外圍設備通過共享或點對點數(shù)字總線接口連接到 DSP 內核。音頻外圍 IC 包含模擬組件,例如數(shù)模轉換器DAC)/音數(shù)轉換器ADC)、模擬濾波器和放大器。除了連接音頻外圍設備外,還可能有音頻接口連接到蜂窩基帶或 WiFi/BT/FM 收音機組合設備,以支持語音通話(在智能手機中)和藍牙音頻或來自 FM 收音機的音頻流。

圖 1:具有代表性的移動音頻/語音子系統(tǒng)。

poYBAGKn4FeAPfyFAAESZmTyMBk673.png

高性能、低功耗音頻數(shù)據(jù)處理

對高性能 DSP 的需求是由語音和音頻處理需求驅動的。在語音方面,為支持高性能 IP 語音 (VoIP) 而部署寬帶 (AMR-WB) 和超寬帶語音編解碼器,同時對噪聲抑制和與噪聲相關的音量控制預處理的要求也越來越高。 這些要求將音頻 DSP 處理復雜性提高了 2 到 4 倍。在音頻方面,編解碼器的復雜性隨著多通道無損版本的引入而達到頂峰,例如:

杜比 TrueHD、MS10、MS11

DTS 主音頻,M6,M8

然而,如表 1 所示,在后處理方面存在重大創(chuàng)新。

表 1:音頻后處理

poYBAGKn4F6AMZqXAAEl7gNVmok256.png

對高性能的需求正在推動音頻 DSP 擁有更多并行、更高精度的乘法累加單元 (MAC)。

在性能需求不斷增加的同時,對低功耗配置的需求也在從兩個角度增加:

對于移動游戲或專業(yè)級音頻播放等高端音頻應用,由于移動設備的電池壽命限制,系統(tǒng)功率分布無法隨數(shù)據(jù)處理性能保持線性增長

在語音觸發(fā)或語音識別等新應用中,音頻系統(tǒng)需要始終開啟

這兩種觀點都要求 DSP 架構具有極高的可擴展性和效率。具有可擴展指令集擴展、可配置內存/I/O 分區(qū)和高級電源管理功能的 DSP 架構是滿足高性能和低功耗需求的最佳選擇。

低功耗音頻傳輸

為了降低功耗并支持語音觸發(fā)等低功耗應用,除了音頻 DSP 的電源效率外,還需要考慮音頻數(shù)據(jù)傳輸?shù)男?。從音頻子系統(tǒng)拓撲來看,有兩個優(yōu)化點可以降低音頻傳輸?shù)墓β省?/p>

第一個優(yōu)化點是將音頻數(shù)據(jù)傳輸模型從基于系統(tǒng)內存的模型更改為 DSP 隧道模型。使用基于系統(tǒng)內存的模型,音頻數(shù)據(jù)預處理和后處理 DSP 被放置在整個 SoC 總線層次結構的系統(tǒng)內存中。該模型要求系統(tǒng)內存和 SoC 總線層次結構在音頻數(shù)據(jù)處理期間始終處于供電狀態(tài)。在此模型中,音頻數(shù)據(jù)還會多次遍歷 SoC 總線層次結構。通過高頻 SoC 總線層次結構和系統(tǒng)內存進行數(shù)據(jù)訪問會消耗大量功率并妨礙對始終在線應用程序的有效支持。在 DSP 隧道模型中,通過音頻接口的音頻數(shù)據(jù)處理和發(fā)送/接收被本地化到具有專用本地存儲器和高效 FIFO 式接口的 DSP 處理器。

第二個優(yōu)化點是利用新的音頻接口標準,這些標準旨在支持具有低 I/O 引腳數(shù)和低功率效率的多個音頻外圍設備。最近,MIPI 聯(lián)盟建立了兩個新的音頻接口標準,SLIMbus 和 SoundWire,以優(yōu)化音頻子系統(tǒng)的連接性。SLIMbus 標準針對應用處理器和獨立 DSP 編解碼器之間的連接性。SoundWire 標準針對許多音頻設備,包括 DSP 編解碼器和音頻外圍設備。SoundWire 總線可以擴展以支持多個數(shù)據(jù)通道,以便在應用處理器和 DSP 編解碼器之間傳輸寬 PCM 音頻樣本。但也可以對其進行優(yōu)化,以支持將窄 PDM 樣本傳輸?shù)絾蝹€數(shù)據(jù)通道上的 MIC 和揚聲器。SoundWire 標準為數(shù)據(jù)傳輸定義了一種改進的 NRZI 數(shù)據(jù)編碼和雙倍數(shù)據(jù)速率,以最大限度地減少總線負載的主動驅動和切換。此外,該標準包含一個明確定義的時鐘速率改變方案和時鐘停止協(xié)議,以進一步降低永遠在線應用的功耗。由 SoundWire 標準優(yōu)化的音頻子系統(tǒng)如圖 2 所示。

圖 2:基于 SoundWire 的音頻子系統(tǒng)優(yōu)化

poYBAGKn4GSAToQaAAEu2mXbYok645.png

構建高性能、低功耗的音頻子系統(tǒng)

高性能、低功耗音頻子系統(tǒng)已成為移動和消費設備的基本要素。新興的新應用程序,例如語音觸發(fā)和識別以及移動游戲,進一步增加了音頻處理的復雜性。音頻子系統(tǒng)設計需要以極低的功耗包含始終開啟的功能,并為多個音頻通道提供極高品質的音頻效果。

審核編輯:郭婷

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 處理器
    +關注

    關注

    68

    文章

    20148

    瀏覽量

    247147
  • dsp
    dsp
    +關注

    關注

    559

    文章

    8214

    瀏覽量

    363982
  • 存儲器
    +關注

    關注

    39

    文章

    7714

    瀏覽量

    170854
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    新品 | Module ASR,AI智能離線語音模塊

    ModuleASR是一款基于CI1302芯片設計的AI智能離線語音模塊。配備麥克風用于清晰音頻采集,并內置揚聲器提供高質量的音頻反饋。同時支持中途
    的頭像 發(fā)表于 12-05 18:15 ?28次閱讀
    新品 | Module ASR,AI智能離線<b class='flag-5'>語音</b><b class='flag-5'>模塊</b>

    速通音頻處理:掌握TTS播放、文件播放與錄音核心,實現(xiàn)完整功能

    這三大模塊的核心邏輯,助你高效打通從核心功能到完整功能的實現(xiàn)路徑。 一、概述 ? 本文檔詳細介紹了基于 Air8000 開發(fā)板或者 Air8000 核心板的音頻功能開發(fā),涵蓋音頻播放、
    的頭像 發(fā)表于 11-21 19:27 ?86次閱讀
    速通<b class='flag-5'>音頻</b>處理:掌握TTS播放、文件播放與錄音核心,<b class='flag-5'>實現(xiàn)</b>完整功能

    廣州唯創(chuàng)電子WT2003H語音芯片系列:通過bin文件實現(xiàn)板載語音更新,支持寬范圍音頻碼率

    在智能終端設備快速迭代的今天,語音芯片的靈活性與音頻處理能力成為產品創(chuàng)新的關鍵。作為專業(yè)的語音IC廠家,廣州唯創(chuàng)電子推出的WT2003H系列MP3音頻播放芯片,以獨特的bin文件板載
    的頭像 發(fā)表于 10-27 08:48 ?226次閱讀
    廣州唯創(chuàng)電子WT2003H<b class='flag-5'>語音</b>芯片系列:<b class='flag-5'>通過</b>bin文件<b class='flag-5'>實現(xiàn)</b>板載<b class='flag-5'>語音</b>更新,支持寬范圍<b class='flag-5'>音頻</b>碼率

    遠距錄音新標桿:WT588FM01高性能錄音模塊語音芯片IC重塑音頻體驗

    音頻技術快速演進的時代,廣州唯創(chuàng)電子WT588FM01錄音模塊以卓越的遠距離拾音能力和專業(yè)級音質表現(xiàn),為智能設備注入頂級音頻性能01突破性遠距離錄音技術1.1智能聲學采集系統(tǒng)WT58
    的頭像 發(fā)表于 10-17 06:31 ?503次閱讀
    遠距錄音新標桿:WT588FM01高性能錄音<b class='flag-5'>模塊</b><b class='flag-5'>語音</b>芯片IC重塑<b class='flag-5'>音頻</b>體驗

    語音輸出模塊是什么?自控語音播報

    語音輸出模塊(VoiceOutputModule)是一種將數(shù)字信號或文本信息轉換為人類可聽語音的硬件/軟件組件。相當于設備的“嘴巴”,讓機器能夠通過聲音與人進行交互。 一、工作原理 1
    的頭像 發(fā)表于 08-13 15:20 ?619次閱讀

    解鎖高品質音頻體驗:探索音頻質量評估與測試的科學之道

    高品質音頻的科學世界!二、音頻質量評估簡介語音質量評估就是通過人類或自動化的方法評價語音質量。在實踐中,有很多主觀和客觀的方法評價
    發(fā)表于 07-22 11:15

    基于 ROS + ADI 芯片方案 的 人形機器人子系統(tǒng)級BOM清單(以腿部子系統(tǒng)為例)

    基于 ROS + ADI 芯片方案 的 人形機器人子系統(tǒng)級BOM清單 (以 腿部子系統(tǒng) 為例),包括核心感知、執(zhí)行與通信模塊,配合主控系統(tǒng)通過 ROS2
    的頭像 發(fā)表于 06-17 17:06 ?1526次閱讀

    語音控制模塊工作原理

    ,才能夠發(fā)出正確的指令。 語音芯片控制模塊實現(xiàn)語音指令 - 設備響應” 的核心組件,其工作原理可拆解為信號采集、處理、識別及指令執(zhí)行的完整鏈路,下面將以WTK69000為例給大家
    的頭像 發(fā)表于 06-17 11:49 ?990次閱讀
    <b class='flag-5'>語音</b>控制<b class='flag-5'>模塊</b>工作原理

    一文帶你了解KaihongOS標準系統(tǒng)的技術架構、子系統(tǒng)系統(tǒng)應用、典型特性以及支持的設備類型

    。 支持ogg、mp3、m4a等音頻格式。 圖2-31 音頻播放外部模塊交互圖 視頻播放:應用通過調用JS接口層提供的AVPlayer接口實現(xiàn)
    發(fā)表于 04-23 07:17

    高音質音頻對講實操演示line in和#麥克風應用#音頻模塊

    音頻模塊
    思為無線
    發(fā)布于 :2025年03月26日 11:12:37

    MOSFET在車載音頻控制系統(tǒng)的應用 #MOS管 #汽車 #車載系統(tǒng) #應用 #音頻模塊

    音頻模塊
    微碧半導體VBsemi
    發(fā)布于 :2025年01月13日 18:01:11

    藍牙音頻接收模塊助力兒童玩具智能化

    互動玩具:玩具可以接收藍牙設備發(fā)送的語音指令,實現(xiàn)交互功能。3.多人互動玩具:通過藍牙傳輸音頻實現(xiàn)多個玩具間的互動,比如多人對戰(zhàn)或者
    的頭像 發(fā)表于 01-10 15:57 ?1108次閱讀
    藍牙<b class='flag-5'>音頻</b>接收<b class='flag-5'>模塊</b>助力兒童玩具智能化

    提升車載音頻體驗,F(xiàn)SC-BT1035 藍牙雙模音頻模塊助力智能車載系統(tǒng)

    在現(xiàn)代車載系統(tǒng)中,音頻體驗不僅僅是娛樂,更是智能互聯(lián)的重要組成部分。無論是駕駛途中流暢的音樂播放,還是通話過程中清晰的語音傳輸,F(xiàn)SC-BT1035 藍牙音頻
    的頭像 發(fā)表于 01-06 09:44 ?971次閱讀

    【「嵌入式系統(tǒng)設計與實現(xiàn)」閱讀體驗】+ 基于語音識別的智能杯墊

    合理,改善飲水規(guī)律。 主要創(chuàng)新點: 磁力攪拌,通過電機轉動實現(xiàn)磁力攪拌功能。 IPS顯示屏,顯示飲水數(shù)據(jù)。 數(shù)據(jù)存儲,保存用戶可供分許的飲水數(shù)據(jù)。 語音識別功能,該模塊采用的是ASR
    發(fā)表于 01-02 18:15

    Alpahwave Semi推出全球首個64Gbps UCIe D2D互聯(lián)IP子系統(tǒng)

    半導體連接IP領域的領先企業(yè)Alpahwave Semi近日宣布了一項重大突破,成功推出了全球首個64Gbps高速UCIe D2D(裸片對裸片)互聯(lián)IP子系統(tǒng)。這一創(chuàng)新成果標志著Alpahwave
    的頭像 發(fā)表于 12-25 14:49 ?1076次閱讀