在基于神經(jīng)網(wǎng)絡(luò)的數(shù)字預(yù)失真(DPD)模型中,使用不同的激活函數(shù)對整個系統(tǒng)性能和能效有何影響?
像整流線性單元(ReLU)這類計算高效的激活函數(shù)能夠降低能耗,因此更適合移動設(shè)備和物聯(lián)網(wǎng)設(shè)備等資源受限的環(huán)境。相反,諸如 sigmoid 和 tanh 等更復(fù)雜的函數(shù),盡管在某些場景下能帶來更優(yōu)的性能,但由于計算需求更高,可能會增加能耗。因此,在數(shù)字預(yù)失真(DPD)模型中選擇激活函數(shù)時,需同時兼顧性能和能效,以根據(jù)目標(biāo)應(yīng)用優(yōu)化系統(tǒng)。
為了解決下一代無線通信中功率放大器(PA)的信號失真和效率低下的難題,本文提出了一種AI驅(qū)動的數(shù)字預(yù)失真(DPD)框架?;诙囗検降膫鹘y(tǒng)DPD方法存在計算復(fù)雜性問題,而且對非線性和記憶效應(yīng)的適應(yīng)能力有限。本文提出的系統(tǒng)利用了先進的神經(jīng)網(wǎng)絡(luò)架構(gòu)動態(tài)優(yōu)化預(yù)失真,在效率、適應(yīng)性和實時校正等方面均優(yōu)于傳統(tǒng)方法。盡管存在模型可解釋性和能耗等挑戰(zhàn),基于此框架打造的可擴展、高效率的解決方案依然代表了現(xiàn)代通信網(wǎng)絡(luò)射頻發(fā)射器設(shè)計的一項重大進步。
OpenAI于2022年11月推出的ChatGPT,是史上用戶增長速度最快的軟件產(chǎn)品之一,充分展現(xiàn)了人工智能(AI)的巨大潛力。機器學(xué)習(xí)(ML)是AI的一個分支,能夠促進計算機執(zhí)行決策和數(shù)據(jù)分析等任務(wù),深刻改變了各行各業(yè)。在通信領(lǐng)域,數(shù)字預(yù)失真(DPD)技術(shù)在AI和ML的推動下不斷發(fā)展,這項技術(shù)對于減少信號失真和提升功率放大器(PA)的效率至關(guān)重要。傳統(tǒng)DPD模型難以處理5G等現(xiàn)代通信系統(tǒng)中存在的非線性特性和記憶效應(yīng)。這些傳統(tǒng)模型假定PA的行為是靜態(tài)且無記憶的,因此僅通過多項式來描述輸入輸出之間的瞬時關(guān)系。然而,AI和ML擅長學(xué)習(xí)復(fù)雜模式,因此能夠給出更精確的解決方案。本文提出了一種基于人工神經(jīng)網(wǎng)絡(luò)的DPD框架,利用PA數(shù)據(jù)來降低增益/相位誤差、提升效率并改善頻譜性能,其效果優(yōu)于傳統(tǒng)方法。
提升PA效率:數(shù)字預(yù)失真技術(shù)融合AI創(chuàng)新
數(shù)字預(yù)失真是一項關(guān)鍵技術(shù),它使功率放大器能夠在飽和區(qū)附近高效工作,同時不損害線性度。DPD通過擴展PA的線性工作范圍,讓射頻(RF)設(shè)計人員能夠充分利用非線性PA的效率優(yōu)勢,同時保持發(fā)射信號的線性度,滿足正交頻分復(fù)用(OFDM)等復(fù)雜調(diào)制方案的需求。
DPD的基本原理是預(yù)失真系數(shù)的引入。預(yù)失真系數(shù)是基于對PA的逆向幅度到幅度(AM-to-AM)和幅度到相位(AM-to-PM)的特性進行建模而得出的。在此過程中,精確的反失真被引入輸入波形中,從而有效補償PA的非線性。因此,DPD不僅能改善信號質(zhì)量,而且讓PA能夠以峰值效率工作。關(guān)于DPD算法及ADI公司的 ADRV9040 RF 收發(fā)器如何為DPD的設(shè)計和實現(xiàn)提供精簡硬件平臺的詳細(xì)內(nèi)容,請參閱“簡化5G基站發(fā)射器配置、設(shè)計和評估” 一文。圖1展示了利用DPD使PA響應(yīng)線性化的原理。
圖1. 利用DPD使PA響應(yīng)線性化的原理:(a)整體線性區(qū)域的典型AM到AM曲線(綠色);(b)DPD的基本概念以及它如何提升功率放大器的效率。
功率放大器在接近飽和時會表現(xiàn)出非線性,從而導(dǎo)致信號失真、頻譜再生和效率降低,這在具有I/Q不平衡和記憶效應(yīng)等缺陷的高帶寬系統(tǒng)中尤其顯著。AI和ML,尤其是神經(jīng)網(wǎng)絡(luò)(NN),能夠?qū)A失真進行建模并動態(tài)優(yōu)化預(yù)失真,從而帶來顛覆性的改進。這種AI驅(qū)動的方法提升了系統(tǒng)的效率和適應(yīng)性,優(yōu)于傳統(tǒng)方法,同時在性能和計算復(fù)雜性之間取得了平衡。
利用神經(jīng)網(wǎng)絡(luò)模型優(yōu)化DPD引擎:一個顛覆性框架的提出
人工神經(jīng)網(wǎng)絡(luò)是人工智能的基石,尤其是在深度學(xué)習(xí)領(lǐng)域。神經(jīng)網(wǎng)絡(luò)的設(shè)計初衷是為了克服傳統(tǒng)機器學(xué)習(xí)算法的局限性。受人類大腦處理信息能力的啟發(fā),神經(jīng)網(wǎng)絡(luò)擅長模式識別、學(xué)習(xí)和決策,因此非常適合解決復(fù)雜的非線性問題。例如,在5G LTE系統(tǒng)中,利用基于神經(jīng)網(wǎng)絡(luò)的DPD方法可以有效解決I/Q不平衡、相移、DC偏移、串?dāng)_和PA非線性等難題。
基于多項式的DPD方案依賴于對系統(tǒng)機制的深入理解,且難以擴展;相比之下,神經(jīng)網(wǎng)絡(luò)模型擅長以較少的約束條件處理復(fù)雜的非線性行為。本節(jié)文章提出一種NN DPD框架,以減輕非線性和發(fā)射器缺陷的影響。過程中涉及三個關(guān)鍵步驟:測試PA特性并收集大量數(shù)據(jù)、訓(xùn)練后失真神經(jīng)網(wǎng)絡(luò)模型、部署模型并進行性能監(jiān)控和調(diào)整。此方法通過機器學(xué)習(xí)將大型數(shù)據(jù)集轉(zhuǎn)化為可實踐的操作,從而為應(yīng)對現(xiàn)代通信挑戰(zhàn)提供穩(wěn)健、可擴展的解決方案。
第1步:收集PA特性數(shù)據(jù)
為了設(shè)計和實現(xiàn)用于優(yōu)化無線功率放大器的AI/ML模型,收集全面、高質(zhì)量的特性數(shù)據(jù)至關(guān)重要,這些數(shù)據(jù)應(yīng)當(dāng)準(zhǔn)確反映PA在不同條件下的實際性能。圖2顯示了一種可用于PA特性數(shù)據(jù)收集的示例配置。
圖2. 用于寬帶PA特性分析的測量配置。
通過圖2所示的測試平臺可以全面分析器件特性,提取S參數(shù)、輸出功率、功率附加效率(PAE)、輸入阻抗、輸入回波損耗、功率增益、AM到PM轉(zhuǎn)換等其他參數(shù)。表1詳細(xì)列出了模型所需的所有輸入數(shù)據(jù)。但需要注意的是,模型的維數(shù)會影響其響應(yīng)時間。此外,采集的數(shù)據(jù)必須先數(shù)字化,然后才能用于訓(xùn)練過程。
表1. 測量項目及其描述
這種嚴(yán)格而系統(tǒng)的數(shù)據(jù)收集方法為開發(fā)能夠準(zhǔn)確預(yù)測和優(yōu)化PA性能的AI/ML模型奠定了基礎(chǔ)。借助這種全面的數(shù)據(jù)集,設(shè)計人員可以實現(xiàn)可靠、高效的無線通信系統(tǒng)。
第2步:訓(xùn)練模型
模型訓(xùn)練過程包括將表1中收集的(部分或全部)信號輸入到系統(tǒng)中,并通過損失函數(shù)來優(yōu)化DPD模型以使誤差最小化。神經(jīng)網(wǎng)絡(luò)架構(gòu)由相互連接的節(jié)點層(例如人工神經(jīng)元)組成,即圖3所示的組成部分。
圖3. 深度學(xué)習(xí)中的多類別預(yù)測神經(jīng)網(wǎng)絡(luò)架構(gòu)。
表2. 神經(jīng)網(wǎng)絡(luò)核心組成部分和描述
在訓(xùn)練期間,隱藏層使數(shù)據(jù)前向傳播,而權(quán)重和偏置通過反向傳播和梯度下降算法進行優(yōu)化。神經(jīng)網(wǎng)絡(luò)結(jié)構(gòu)可進行調(diào)整,以包含更多神經(jīng)元(適用于高度非線性的分量)或更少神經(jīng)元(適用于較平滑的元素)。
關(guān)于哪些AI硬件、軟件和工具最適合用來創(chuàng)建高效、可擴展的AI模型訓(xùn)練環(huán)境,本文不作深入探討,但我們建議AI工程師可以嘗試一下KNIME,這是一個用于數(shù)據(jù)分析和機器學(xué)習(xí)的無代碼平臺。KNIME具有圖形用戶界面(GUI),用戶只需拖放節(jié)點即可設(shè)計工作流程,無需掌握大量編程知識。所設(shè)計的工作流程非常直觀且易于理解,因此適合廣大用戶使用。對于更傾向于使用Python進行開發(fā)的人來說,Keras與TensorFlow的結(jié)合能帶來顯著優(yōu)勢,將Keras的簡單易用性與TensorFlow的穩(wěn)健性和可擴展性相融合,是實驗級或生產(chǎn)級深度學(xué)習(xí)應(yīng)用等各類項目的理想選擇。
PA特性分析工作涉及到百萬級樣本的收集,其中70%用于訓(xùn)練,30%用于測試和驗證,以評估模型模擬PA行為的能力。模型性能通過準(zhǔn)確率、精度、召回率、F1分?jǐn)?shù)和ROC-AUC等指標(biāo)來評估。
第3步:驗證和部署神經(jīng)網(wǎng)絡(luò)模型
部署過程從模型的驗證開始,以確保模型的穩(wěn)健性和準(zhǔn)確性。驗證集用于監(jiān)控訓(xùn)練質(zhì)量并決定何時停止訓(xùn)練,測試集則用于獨立評估模型的準(zhǔn)確性和泛化能力。解決過擬合和欠擬合問題,對于確保模型在新數(shù)據(jù)集上的表現(xiàn)至關(guān)重要。為抑制過擬合、提升模型的泛化能力,可采用以下方法:精簡模型架構(gòu),限制神經(jīng)網(wǎng)絡(luò)層數(shù)、隱藏神經(jīng)元數(shù)量或參數(shù)規(guī)模;擴充訓(xùn)練數(shù)據(jù)集規(guī)模;或?qū)嵤┎眉?,例如剔除對模型性能影響微弱的冗余神?jīng)元。另一方面,為抑制欠擬合,可以增加隱藏神經(jīng)元以提升模型的復(fù)雜性,或調(diào)整學(xué)習(xí)率、批量大小、正則化強度等超參數(shù)以改善性能。ML工程師必須平衡上述種種策略,并迭代評估DPD模型的性能,從而實現(xiàn)穩(wěn)健且可泛化的模型,同時保證模型的執(zhí)行速度。圖4顯示了神經(jīng)網(wǎng)絡(luò)DPD模型評估系統(tǒng)架構(gòu)的總體框圖。
圖4. 神經(jīng)網(wǎng)絡(luò)DPD模型評估平臺的框圖。
在任何情況下,要確定隱藏神經(jīng)元的最佳數(shù)量,必須依靠實證研究、反復(fù)試錯或在訓(xùn)練過程中采用自適應(yīng)方法。這些調(diào)整有助于確保神經(jīng)網(wǎng)絡(luò)在復(fù)雜性和性能之間取得適當(dāng)平衡,從而實現(xiàn)高效且有效的模型部署。在部署模型的過程中,采用邊緣AI嵌入式MCU,例如ADI公司的 MAX78000 卷積神經(jīng)網(wǎng)絡(luò)加速器芯片,可以簡化模型的部署。
AI/ML與DPD系統(tǒng)集成:挑戰(zhàn)與機遇
將人工智能和機器學(xué)習(xí)融入DPD系統(tǒng),有望大幅提升系統(tǒng)性能,但也帶來了一些現(xiàn)實挑戰(zhàn)。DPD系統(tǒng)需要低延遲和高處理速度,而這對于計算密集型ML模型來說很難實現(xiàn)。此外,為了在溫度波動、硬件老化等動態(tài)運行條件下保持最佳性能,必須采用實時學(xué)習(xí)或遷移學(xué)習(xí)等自適應(yīng)技術(shù)。
功耗是另一個關(guān)鍵考量因素。AI/ML模型(尤其是深度學(xué)習(xí)架構(gòu))往往比傳統(tǒng)DPD方法更耗電,因此不太適合對功耗敏感的環(huán)境。未來的實驗應(yīng)該采用輕量級神經(jīng)網(wǎng)絡(luò),即標(biāo)準(zhǔn)神經(jīng)網(wǎng)絡(luò)的優(yōu)化版本。輕量級神經(jīng)網(wǎng)絡(luò)在設(shè)計上減少了參數(shù)數(shù)量,降低了算力需求,并提高了內(nèi)存利用效率,對于計算資源有限的應(yīng)用特別有用,例如移動和物聯(lián)網(wǎng)(IoT)設(shè)備或其他資源受限的系統(tǒng)。
許多ML模型(尤其是深度神經(jīng)網(wǎng)絡(luò))缺乏可解釋性,進一步加劇了它們與DPD系統(tǒng)集成的復(fù)雜性。神經(jīng)網(wǎng)絡(luò)模型將復(fù)雜的操作簡化為權(quán)重、偏置和激活函數(shù),工作過程并不透明,因此調(diào)試和優(yōu)化是相當(dāng)困難的。
結(jié)語
大規(guī)模MIMO等5G技術(shù)要求更低的功耗和更高的精度,DPD系統(tǒng)必須不斷發(fā)展以應(yīng)對新的復(fù)雜性。通過自適應(yīng)學(xué)習(xí)和混合建模等創(chuàng)新,AI/ML將為實現(xiàn)可擴展、高效節(jié)能的解決方案提供關(guān)鍵支持。神經(jīng)網(wǎng)絡(luò)能夠模擬復(fù)雜的非線性關(guān)系和記憶效應(yīng),無需明確的數(shù)學(xué)公式就能近似處理非線性函數(shù),讓DPD系統(tǒng)設(shè)計得以簡化。
集成AI/ML有助于提升能效比,使PA能夠在更接近飽和的狀態(tài)下工作,同時利用非線性PA降低成本。雖然存在挑戰(zhàn),但AI/ML驅(qū)動的系統(tǒng)在增強DPD系統(tǒng)的精度、適應(yīng)性和可擴展性方面潛力巨大。傳統(tǒng)多項式與AI/ML技術(shù)相結(jié)合的混合方法能夠提供一種均衡的解決方案,既保留了經(jīng)典模型的可解釋性,又融合了AI/ML的先進能力。在AI/ML的助力下,通過創(chuàng)新策略應(yīng)對種種挑戰(zhàn),可以推動DPD系統(tǒng)取得突破性進展,進而支持現(xiàn)代通信技術(shù)的持續(xù)進步。
-
神經(jīng)網(wǎng)絡(luò)
+關(guān)注
關(guān)注
42文章
4819瀏覽量
106019 -
AI
+關(guān)注
關(guān)注
88文章
36980瀏覽量
289814 -
模型
+關(guān)注
關(guān)注
1文章
3609瀏覽量
51412 -
數(shù)字預(yù)失真
+關(guān)注
關(guān)注
3文章
25瀏覽量
13805
原文標(biāo)題:模擬對話丨實現(xiàn)更智能的數(shù)字預(yù)失真引擎:一種基于神經(jīng)網(wǎng)絡(luò)的方法
文章出處:【微信號:analog_devices,微信公眾號:analog_devices】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
評論