多光譜成像技術(shù)已成為推動(dòng)眾多領(lǐng)域取得重大進(jìn)步的關(guān)鍵工具，涵蓋環(huán)境監(jiān)測(cè)、天文學(xué)、農(nóng)業(yè)科學(xué)、生物成像、醫(yī)學(xué)診斷和食品質(zhì)量控制等?，F(xiàn)代快照式光譜成像系統(tǒng)通常利用編碼孔徑與計(jì)算圖像重建算法相結(jié)合，以數(shù)字方式來(lái)克服傳統(tǒng)多光譜成像系統(tǒng)存在的缺點(diǎn)。隨著高分辨率圖像傳感器陣列的發(fā)展，犧牲一定的空間分辨率以獲取更豐富的光譜信息是目前更可行的方法。

圍繞這種權(quán)衡設(shè)計(jì)的最常見(jiàn)且相對(duì)原始的光譜成像系統(tǒng)是基于拜耳濾光片的彩色相機(jī)。盡管它在各種成像應(yīng)用中被頻繁使用，但研究人員一直致力于開(kāi)發(fā)更優(yōu)的替代方案，以克服這些吸收型濾光片存在的較高串?dāng)_、較低功率效率和較差色彩還原等缺陷。為此，研究人員探索了包括等離子體天線(xiàn)、電介質(zhì)超構(gòu)表面和三維多孔材料在內(nèi)的諸多工程光學(xué)材料結(jié)構(gòu)。然而，這些包括各種超構(gòu)材料設(shè)計(jì)在內(nèi)的基于結(jié)構(gòu)化材料的方法，均局限于4個(gè)或更少的光譜通道，并且用于多光譜成像的大面陣光譜濾波器的研究暫未見(jiàn)報(bào)道。

據(jù)麥姆斯咨詢(xún)報(bào)道，近日，美國(guó)加州大學(xué)洛杉磯分校（University of California, Los Angeles）的科研團(tuán)隊(duì)在Light: Science & Applications期刊上發(fā)表了以“Snapshot multispectral imaging using a diffractive optical network”為主題的論文。該論文第一作者為Deniz Mengu，通訊作者為Aydogan Ozcan。

在這項(xiàng)研究中，研究人員介紹了一種基于衍射光學(xué)網(wǎng)絡(luò)（亦稱(chēng)為“D2NN”，衍射深度神經(jīng)網(wǎng)絡(luò)）的快照式多光譜成像儀，并分別演示了具有4（2 × 2）個(gè)、9（3 × 3）個(gè)和16（4 × 4）個(gè)獨(dú)特光譜帶（光譜通道NB）的性能，這些光譜帶在輸出圖像視場(chǎng)（FOV）周期性重復(fù)，從而構(gòu)成虛擬的多光譜濾波器陣列。

這種基于衍射網(wǎng)絡(luò)的多光譜成像儀（如圖1）利用深度學(xué)習(xí)訓(xùn)練，可將物體的空間信息映射到虛擬像素網(wǎng)格上，每個(gè)像素?cái)y帶預(yù)設(shè)光譜帶的信息，通過(guò)精確控制的光衍射在軸向跨度約~72 λm的無(wú)源透射層實(shí)現(xiàn)快照式多光譜成像，其中λm是所研究的整個(gè)光譜帶的平均波長(zhǎng)。研究人員所展示的衍射光學(xué)網(wǎng)絡(luò)能夠在無(wú)需傳統(tǒng)的光譜濾波器的情況下，將單色焦平面陣列或圖像傳感器轉(zhuǎn)換為快照式多光譜成像器件。

圖1 衍射多光譜成像儀的原理圖

圖1展示了一種5層衍射多光譜成像儀的光學(xué)設(shè)計(jì)和正向模型，該成像儀可以將NB個(gè)不同光譜帶在空間上分離到位于輸出像平面的單色圖像傳感器上的虛擬光譜濾波器陣列，圖1為NB= 9的多光譜成像儀示例，NB可進(jìn)一步增加。

為了訓(xùn)練（和設(shè)計(jì)）衍射多光譜成像儀，研究人員創(chuàng)建了輸入對(duì)象，其中每個(gè)光譜帶的給定對(duì)象的傳輸場(chǎng)振幅由涵蓋101.6 K訓(xùn)練圖像的EMNIST數(shù)據(jù)集中隨機(jī)選擇的圖像來(lái)表征。在基于深度學(xué)習(xí)的訓(xùn)練階段之后，使用包含2080個(gè)不同物體（在訓(xùn)練期間從未見(jiàn)過(guò)）的多色圖像測(cè)試集來(lái)評(píng)估訓(xùn)練后的衍射網(wǎng)絡(luò)多光譜成像性能，NB= 9的衍射多光譜成像儀相關(guān)性能的研究結(jié)果如圖2所示。為了證明衍射多光譜成像的光譜通道數(shù)量可以增加，圖3展示了NB= 16的衍射多光譜成像儀的性能研究結(jié)果。

圖2 NB= 9的衍射多光譜成像儀的性能研究

圖3 NB= 16的衍射多光譜成像儀的性能研究

接著，為了實(shí)驗(yàn)驗(yàn)證這項(xiàng)研究所提出的衍射多光譜成像框架，研究人員設(shè)計(jì)了一組可以處理太赫茲波長(zhǎng)的衍射網(wǎng)絡(luò)。如圖4所示，該太赫茲衍射多光譜成像儀采用3層（K = 3）衍射多光譜成像儀，在其輸出像平面上具有周期性重復(fù)的2 × 2光譜像元（以NB= 4為例時(shí)的0.375 THz、0.4 THz、0.425 THz、0.45 THz）以構(gòu)成虛擬的濾波器陣列。

圖4 多光譜太赫茲成像儀的實(shí)驗(yàn)設(shè)置（NB= 4）

通常，衍射光學(xué)網(wǎng)絡(luò)的一個(gè)關(guān)鍵設(shè)計(jì)參數(shù)是深度學(xué)習(xí)設(shè)計(jì)的衍射特征數(shù)N，這是因?yàn)檠苌涮卣鲾?shù)N直接決定了系統(tǒng)中獨(dú)立自由度的數(shù)量。圖5a至圖5c分別比較了NB= 4、NB= 9、NB= 16時(shí)，四種不同衍射網(wǎng)絡(luò)架構(gòu)實(shí)現(xiàn)的多光譜成像質(zhì)量隨N的變化。圖5d進(jìn)一步說(shuō)明了NB對(duì)四種不同NL和K組合下的衍射網(wǎng)絡(luò)多光譜成像性能的影響。

圖5 衍射特征數(shù)（N）和目標(biāo)光譜帶（NB）對(duì)衍射光學(xué)網(wǎng)絡(luò)多光譜成像質(zhì)量的影響

關(guān)于衍射多光譜成像儀設(shè)計(jì)的另一個(gè)關(guān)鍵性能指標(biāo)是光學(xué)合成虛擬濾波器陣列的功率傳輸效率。如圖6所示，NB= 9的5層衍射多光譜成像儀可實(shí)現(xiàn)高達(dá)79.32%的平均虛擬濾波器傳輸效率。

圖6 多光譜成像質(zhì)量與虛擬濾波器陣列功率傳輸效率之間的權(quán)衡

綜上所述，本研究提出了一種基于衍射光學(xué)網(wǎng)絡(luò)的多光譜成像系統(tǒng)，利用深度學(xué)習(xí)在輸出圖像視場(chǎng)創(chuàng)建虛擬的光譜濾波器陣列。該衍射多光譜成像儀可在大范圍光譜上進(jìn)行空間相干成像，同時(shí)將一組預(yù)設(shè)的光譜通道連接到輸出像平面的像素陣列上，將單色焦平面陣列或圖像傳感器轉(zhuǎn)換為多光譜成像器件，而無(wú)需傳統(tǒng)的光譜濾波器或圖像重建算法。此外，該衍射多光譜成像儀的光譜響應(yīng)對(duì)輸入偏振態(tài)不敏感。通過(guò)數(shù)值模擬，研究人員提出了基于無(wú)源空間結(jié)構(gòu)衍射曲面的不同衍射網(wǎng)絡(luò)設(shè)計(jì)，在可見(jiàn)光光譜范圍內(nèi)分別實(shí)現(xiàn)了4個(gè)、9個(gè)和16個(gè)獨(dú)特光譜帶的快照式多光譜成像，其緊湊型設(shè)計(jì)的軸向跨度為~72 λm，其中λm為所研究光譜帶的平均波長(zhǎng)。

此外，研究人員通過(guò)實(shí)驗(yàn)論證了基于3D打印衍射網(wǎng)絡(luò)的衍射多光譜成像儀，該多光譜成像儀在其輸出像平面上創(chuàng)建了空間重復(fù)的虛擬光譜濾波器陣列，該陣列具有在太赫茲頻譜的4（2 × 2）個(gè)獨(dú)特光譜帶。憑借其外形緊湊且無(wú)需計(jì)算、高能效以及偏振不敏感的正向操作等特點(diǎn)，衍射多光譜成像儀可為各類(lèi)成像和傳感應(yīng)用帶來(lái)變革性影響，并可用于尚未廣泛使用的高密度、廣域的多光譜像素陣列的不同電磁波譜領(lǐng)域。

審核編輯：劉清