chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

通過IP模塊實現(xiàn)音頻/語音子系統(tǒng)的設計

星星科技指導員 ? 來源:嵌入式計算設計 ? 作者:Charles Qi ? 2022-06-14 09:11 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

隨著移動游戲和語音觸發(fā)等應用的日益普及,音頻/語音子系統(tǒng)在許多移動片上系統(tǒng) (SoC) 設計中發(fā)揮著重要作用。該子系統(tǒng)的設計必須滿足雙重需求:高性能、高分辨率音頻流處理以及始終在線、低功耗的語音觸發(fā)和識別。可定制的數(shù)字信號處理 (DSP) 和音頻/語音子系統(tǒng)解決方案知識產(chǎn)權 (IP) 模塊可以提供一種經(jīng)濟高效的方式來開發(fā)和交付高性能音頻/語音產(chǎn)品。

在過去十年中,智能手機和平板電腦的出現(xiàn)推動了相當大的技術創(chuàng)新。高性能音頻和視頻應用對于為這些設備帶來個性化和消費者吸引力至關重要。移動游戲和語音觸發(fā)和識別等新興應用正在將音頻/語音子系統(tǒng)性能的要求推向頻譜的兩個極端。一方面,對高性能、高分辨率的多通道音頻流處理的需求不斷增長。另一方面,需要以極低的功耗始終開啟語音觸發(fā)和語音識別智能。音頻/語音子系統(tǒng)設計必須部署先進的數(shù)字信號處理 (DSP) 技術和架構完善的系統(tǒng)解決方案,以滿足不斷增長的需求。

移動音頻/語音子系統(tǒng)概述

圖 1 顯示了一個具有代表性的移動音頻子系統(tǒng)。該子系統(tǒng)以音頻 DSP 內(nèi)核為中心,處理主要的音頻數(shù)據(jù)處理,包括對不同壓縮標準的流編碼/解碼、采樣率轉(zhuǎn)換、前后處理、噪聲抑制、語音觸發(fā)/語音識別等。音頻 DSP 內(nèi)核可能會或可能不會集成到應用處理器片上系統(tǒng) (SoC) 中。如果它被集成,DSP 內(nèi)核將是一個卸載處理器,位于 SoC 總線層次結構上,可以訪問 SoC 的主存儲器系統(tǒng)。如果 DSP 未集成,則有專用總線接口將應用處理器 SoC 連接到獨立 DSP。MIC 和揚聲器等音頻外圍設備通過共享或點對點數(shù)字總線接口連接到 DSP 內(nèi)核。音頻外圍 IC 包含模擬組件,例如數(shù)模轉(zhuǎn)換器DAC)/音數(shù)轉(zhuǎn)換器ADC)、模擬濾波器和放大器。除了連接音頻外圍設備外,還可能有音頻接口連接到蜂窩基帶或 WiFi/BT/FM 收音機組合設備,以支持語音通話(在智能手機中)和藍牙音頻或來自 FM 收音機的音頻流。

圖 1:具有代表性的移動音頻/語音子系統(tǒng)。

poYBAGKn4FeAPfyFAAESZmTyMBk673.png

高性能、低功耗音頻數(shù)據(jù)處理

對高性能 DSP 的需求是由語音和音頻處理需求驅(qū)動的。在語音方面,為支持高性能 IP 語音 (VoIP) 而部署寬帶 (AMR-WB) 和超寬帶語音編解碼器,同時對噪聲抑制和與噪聲相關的音量控制預處理的要求也越來越高。 這些要求將音頻 DSP 處理復雜性提高了 2 到 4 倍。在音頻方面,編解碼器的復雜性隨著多通道無損版本的引入而達到頂峰,例如:

杜比 TrueHD、MS10、MS11

DTS 主音頻,M6,M8

然而,如表 1 所示,在后處理方面存在重大創(chuàng)新。

表 1:音頻后處理

poYBAGKn4F6AMZqXAAEl7gNVmok256.png

對高性能的需求正在推動音頻 DSP 擁有更多并行、更高精度的乘法累加單元 (MAC)。

在性能需求不斷增加的同時,對低功耗配置的需求也在從兩個角度增加:

對于移動游戲或?qū)I(yè)級音頻播放等高端音頻應用,由于移動設備的電池壽命限制,系統(tǒng)功率分布無法隨數(shù)據(jù)處理性能保持線性增長

在語音觸發(fā)或語音識別等新應用中,音頻系統(tǒng)需要始終開啟

這兩種觀點都要求 DSP 架構具有極高的可擴展性和效率。具有可擴展指令集擴展、可配置內(nèi)存/I/O 分區(qū)和高級電源管理功能的 DSP 架構是滿足高性能和低功耗需求的最佳選擇。

低功耗音頻傳輸

為了降低功耗并支持語音觸發(fā)等低功耗應用,除了音頻 DSP 的電源效率外,還需要考慮音頻數(shù)據(jù)傳輸?shù)男?。從音頻子系統(tǒng)拓撲來看,有兩個優(yōu)化點可以降低音頻傳輸?shù)墓β省?/p>

第一個優(yōu)化點是將音頻數(shù)據(jù)傳輸模型從基于系統(tǒng)內(nèi)存的模型更改為 DSP 隧道模型。使用基于系統(tǒng)內(nèi)存的模型,音頻數(shù)據(jù)預處理和后處理 DSP 被放置在整個 SoC 總線層次結構的系統(tǒng)內(nèi)存中。該模型要求系統(tǒng)內(nèi)存和 SoC 總線層次結構在音頻數(shù)據(jù)處理期間始終處于供電狀態(tài)。在此模型中,音頻數(shù)據(jù)還會多次遍歷 SoC 總線層次結構。通過高頻 SoC 總線層次結構和系統(tǒng)內(nèi)存進行數(shù)據(jù)訪問會消耗大量功率并妨礙對始終在線應用程序的有效支持。在 DSP 隧道模型中,通過音頻接口的音頻數(shù)據(jù)處理和發(fā)送/接收被本地化到具有專用本地存儲器和高效 FIFO 式接口的 DSP 處理器。

第二個優(yōu)化點是利用新的音頻接口標準,這些標準旨在支持具有低 I/O 引腳數(shù)和低功率效率的多個音頻外圍設備。最近,MIPI 聯(lián)盟建立了兩個新的音頻接口標準,SLIMbus 和 SoundWire,以優(yōu)化音頻子系統(tǒng)的連接性。SLIMbus 標準針對應用處理器和獨立 DSP 編解碼器之間的連接性。SoundWire 標準針對許多音頻設備,包括 DSP 編解碼器和音頻外圍設備。SoundWire 總線可以擴展以支持多個數(shù)據(jù)通道,以便在應用處理器和 DSP 編解碼器之間傳輸寬 PCM 音頻樣本。但也可以對其進行優(yōu)化,以支持將窄 PDM 樣本傳輸?shù)絾蝹€數(shù)據(jù)通道上的 MIC 和揚聲器。SoundWire 標準為數(shù)據(jù)傳輸定義了一種改進的 NRZI 數(shù)據(jù)編碼和雙倍數(shù)據(jù)速率,以最大限度地減少總線負載的主動驅(qū)動和切換。此外,該標準包含一個明確定義的時鐘速率改變方案和時鐘停止協(xié)議,以進一步降低永遠在線應用的功耗。由 SoundWire 標準優(yōu)化的音頻子系統(tǒng)如圖 2 所示。

圖 2:基于 SoundWire 的音頻子系統(tǒng)優(yōu)化

poYBAGKn4GSAToQaAAEu2mXbYok645.png

構建高性能、低功耗的音頻子系統(tǒng)

高性能、低功耗音頻子系統(tǒng)已成為移動和消費設備的基本要素。新興的新應用程序,例如語音觸發(fā)和識別以及移動游戲,進一步增加了音頻處理的復雜性。音頻子系統(tǒng)設計需要以極低的功耗包含始終開啟的功能,并為多個音頻通道提供極高品質(zhì)的音頻效果。

審核編輯:郭婷

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 處理器
    +關注

    關注

    68

    文章

    20234

    瀏覽量

    250617
  • dsp
    dsp
    +關注

    關注

    560

    文章

    8236

    瀏覽量

    365829
  • 存儲器
    +關注

    關注

    39

    文章

    7727

    瀏覽量

    171411
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    深入剖析LM4930音頻子系統(tǒng):特性、應用與設計要點

    深入剖析LM4930音頻子系統(tǒng):特性、應用與設計要點 在當今的電子設備中,音頻功能的重要性日益凸顯。無論是移動電話、便攜式音頻設備還是個人數(shù)字助理(PDA),都需要高質(zhì)量的
    的頭像 發(fā)表于 02-03 15:40 ?53次閱讀

    探索LM49450:高性能音頻子系統(tǒng)的卓越之選

    探索LM49450:高性能音頻子系統(tǒng)的卓越之選 在當今的電子設備中,音頻體驗的質(zhì)量越來越受到重視。從便攜式媒體播放器到筆記本電腦,用戶對于清晰、響亮且低失真的音頻有著更高的要求。德州儀
    的頭像 發(fā)表于 02-02 16:30 ?118次閱讀

    TPA2054D4:高性能音頻子系統(tǒng)的設計與應用

    TPA2054D4:高性能音頻子系統(tǒng)的設計與應用 在音頻設備的設計領域,高性能音頻子系統(tǒng)的選擇至關重要。德州儀器(TI)的TPA2054D4
    的頭像 發(fā)表于 02-02 11:30 ?109次閱讀

    TPA2051D3音頻子系統(tǒng):特性、應用與設計要點

    TPA2051D3音頻子系統(tǒng):特性、應用與設計要點 在音頻設備設計領域,一款高性能的音頻子系統(tǒng)對于提升音質(zhì)和用戶體驗至關重要。德州儀器(TI
    的頭像 發(fā)表于 02-02 11:05 ?84次閱讀

    TPA2054D4A:高性能音頻子系統(tǒng)的全面解析

    TPA2054D4A:高性能音頻子系統(tǒng)的全面解析 在當今的電子設備中,音頻體驗是用戶關注的重點之一。TI推出的TPA2054D4A音頻子系統(tǒng)
    的頭像 發(fā)表于 02-02 09:35 ?275次閱讀

    探索LM49153:高性能音頻子系統(tǒng)的設計秘籍

    探索LM49153:高性能音頻子系統(tǒng)的設計秘籍 在當今的便攜式電子設備領域,音頻質(zhì)量和功耗管理一直是開發(fā)者關注的焦點。德州儀器(TI)的LM49153音頻
    的頭像 發(fā)表于 01-30 16:20 ?124次閱讀

    探索LM49251:高性能音頻子系統(tǒng)的卓越之選

    探索LM49251:高性能音頻子系統(tǒng)的卓越之選 在當今的便攜式手持設備領域,音頻體驗的質(zhì)量愈發(fā)重要。TI推出的LM49251音頻子系統(tǒng),以其
    的頭像 發(fā)表于 01-30 16:00 ?97次閱讀

    語音跳線:構建高效音頻傳輸系統(tǒng)的核心組件

    語音跳線的核心價值。 一、技術原理:音頻信號的“純凈通道” 語音跳線通過物理結構與材料創(chuàng)新,實現(xiàn)音頻
    的頭像 發(fā)表于 01-19 10:12 ?134次閱讀
    <b class='flag-5'>語音</b>跳線:構建高效<b class='flag-5'>音頻</b>傳輸<b class='flag-5'>系統(tǒng)</b>的核心組件

    MAX9879:高效立體聲D類音頻子系統(tǒng)的卓越之選

    MAX9879:高效立體聲D類音頻子系統(tǒng)的卓越之選 在當今的音頻設備領域,對于高性能、小尺寸且低功耗音頻解決方案的需求與日俱增。Maxim Integrated推出的MAX9879立體
    的頭像 發(fā)表于 01-16 16:40 ?143次閱讀

    MAX97003:高效低噪音頻子系統(tǒng)的卓越之選

    MAX97003:高效低噪音頻子系統(tǒng)的卓越之選 在音頻電子設備的設計領域,一款性能卓越的音頻子系統(tǒng)對于提升產(chǎn)品音質(zhì)和用戶體驗至關重要。今天,
    的頭像 發(fā)表于 01-16 15:45 ?113次閱讀

    博世GTM IP模塊在車載系統(tǒng)中的具體實現(xiàn)方式與優(yōu)勢

    在汽車電子系統(tǒng)中,如何充分發(fā)揮 GTM IP的功能,以滿足復雜的系統(tǒng)級應用場景,是用戶實現(xiàn)高效控制與精確響應的關鍵。本文將聚焦幾個典型且核心的應用實例,探討GTM
    的頭像 發(fā)表于 12-30 17:36 ?613次閱讀
    博世GTM <b class='flag-5'>IP</b><b class='flag-5'>模塊</b>在車載<b class='flag-5'>系統(tǒng)</b>中的具體<b class='flag-5'>實現(xiàn)</b>方式與優(yōu)勢

    新品 | Module ASR,AI智能離線語音模塊

    ModuleASR是一款基于CI1302芯片設計的AI智能離線語音模塊。配備麥克風用于清晰音頻采集,并內(nèi)置揚聲器提供高質(zhì)量的音頻反饋。同時支持中途
    的頭像 發(fā)表于 12-05 18:15 ?577次閱讀
    新品 | Module ASR,AI智能離線<b class='flag-5'>語音</b><b class='flag-5'>模塊</b>

    速通音頻處理:掌握TTS播放、文件播放與錄音核心,實現(xiàn)完整功能

    這三大模塊的核心邏輯,助你高效打通從核心功能到完整功能的實現(xiàn)路徑。 一、概述 ? 本文檔詳細介紹了基于 Air8000 開發(fā)板或者 Air8000 核心板的音頻功能開發(fā),涵蓋音頻播放、
    的頭像 發(fā)表于 11-21 19:27 ?219次閱讀
    速通<b class='flag-5'>音頻</b>處理:掌握TTS播放、文件播放與錄音核心,<b class='flag-5'>實現(xiàn)</b>完整功能

    廣州唯創(chuàng)電子WT2003H語音芯片系列:通過bin文件實現(xiàn)板載語音更新,支持寬范圍音頻碼率

    在智能終端設備快速迭代的今天,語音芯片的靈活性與音頻處理能力成為產(chǎn)品創(chuàng)新的關鍵。作為專業(yè)的語音IC廠家,廣州唯創(chuàng)電子推出的WT2003H系列MP3音頻播放芯片,以獨特的bin文件板載
    的頭像 發(fā)表于 10-27 08:48 ?493次閱讀
    廣州唯創(chuàng)電子WT2003H<b class='flag-5'>語音</b>芯片系列:<b class='flag-5'>通過</b>bin文件<b class='flag-5'>實現(xiàn)</b>板載<b class='flag-5'>語音</b>更新,支持寬范圍<b class='flag-5'>音頻</b>碼率

    基于 ROS + ADI 芯片方案 的 人形機器人子系統(tǒng)級BOM清單(以腿部子系統(tǒng)為例)

    基于 ROS + ADI 芯片方案 的 人形機器人子系統(tǒng)級BOM清單 (以 腿部子系統(tǒng) 為例),包括核心感知、執(zhí)行與通信模塊,配合主控系統(tǒng)通過 ROS2
    的頭像 發(fā)表于 06-17 17:06 ?1967次閱讀