雙目視覺技術(shù)的原理、結(jié)構(gòu)、特點、發(fā)展現(xiàn)狀和發(fā)展方向分析

雙目立體視覺是機器視覺的一種重要形式，它是基于視差原理并由多幅圖像獲取物體三維幾何信息的方法。

雙目立體視覺系統(tǒng)一般由雙攝像機從不同角度同時獲得被測物的兩幅數(shù)字圖像，或由單攝像機在不同時刻從不同角度獲得被測物的兩幅數(shù)字圖像，并基于視差原理恢復(fù)出物體的三維幾何信息，重建物體三維輪廓及位置。雙目立體視覺系統(tǒng)在機器視覺領(lǐng)域有著廣泛的應(yīng)用前景。

雙目立體視覺技術(shù)的實現(xiàn)可分為以下步驟：圖像獲取、攝像機標(biāo)定、特征提取、圖像匹配和三維重建，國外雙目體視目前主要應(yīng)用于四個領(lǐng)域：機器人導(dǎo)航、微操作系統(tǒng)的參數(shù)檢測、三維測量和虛擬現(xiàn)實，國內(nèi)主要研究對多自由度機械裝置的動態(tài)、精確位姿檢測，對三維不規(guī)則物體（偏轉(zhuǎn)線圈）的三維空間坐標(biāo)進(jìn)行非接觸精密測量，全自主足球機器人導(dǎo)航等。

雙目立體視覺這一有著廣闊應(yīng)用前景的學(xué)科，隨著光學(xué)，電子學(xué)以及計算機技術(shù)的發(fā)展，將不斷進(jìn)步，逐漸實用化，不僅將成為工業(yè)檢測，生物醫(yī)學(xué)，虛擬現(xiàn)實等領(lǐng)域。

雙目視覺與TOF的差異性分析

雙目視覺：雙目立體視覺測距的原理和人眼類似，通過計算空間中同一個物體在兩個相機成像的視差就可以根據(jù)如下三角關(guān)系計算得到物體離相機的距離：

雙目立體視覺測距算法的核心就是尋找對應(yīng)關(guān)系，可以理解為給定一個相機拍攝的圖片中的任意一個像素點，如何在另外一個相機拍攝的圖像中找到和它對應(yīng)的像素點，這個過程需要特征提取、特征匹配等一系列復(fù)雜的算法。

雙目視覺對目標(biāo)物體的三維重建技術(shù)的應(yīng)用

計算機視覺檢測技術(shù)以其非接觸、快速、高精度、自動化程度高等諸多優(yōu)點，在工業(yè)生產(chǎn)中得到了越來越廣泛的應(yīng)用。已有的方法包括基于單攝像頭結(jié)合結(jié)構(gòu)光的方法、雙目視覺方法、投影儀配合攝像機方法等。其中雙目視覺因其結(jié)構(gòu)靈活、安裝方便、成本低而被廣泛采用。

目視覺測量要解決的問題是如何通過兩維CCD圖像恢復(fù)出被測量的三維信息，攝像機標(biāo)定與立體匹配是雙目立體視覺系統(tǒng)中最重要也是最困難的問題。隨著攝影測量和計算機視覺理論的發(fā)展，許多學(xué)者對攝像機標(biāo)定技術(shù)進(jìn)行了深入研究，現(xiàn)已發(fā)展的比較成熟；

也有許多學(xué)者對立體匹配進(jìn)行了大量的研究。提出了一種基于雙目立體視覺的激光三維測量技術(shù)，采用了張正友平面模板標(biāo)定法，系統(tǒng)標(biāo)定不需昂貴的精制標(biāo)定塊；同時，利用標(biāo)定結(jié)果對圖像進(jìn)行校正，并結(jié)合線結(jié)構(gòu)激光條紋進(jìn)行匹配點搜索，大大降低了雙目立體視覺中立體匹配的難度。

激光結(jié)構(gòu)光由于波長單一，抗電磁干擾能力強，檢測精度高等優(yōu)點，廣泛應(yīng)用于物體檢測與跟蹤，是主動視覺測量技術(shù)，雙目立體視覺因為有快速，準(zhǔn)確，靈活等特點。

被廣泛的應(yīng)用于醫(yī)療，工業(yè)，人工智能等多個領(lǐng)域，尤其當(dāng)工作的環(huán)境惡劣、條件艱苦（例如：高山地區(qū)的電力線監(jiān)測，建筑施工工地的墻面抹灰，外太空導(dǎo)航等），或者要求長時間、穩(wěn)定性強的工作（國防安全系統(tǒng)，醫(yī)學(xué)成像等），雙目立體視覺系統(tǒng)顯現(xiàn)出來了無法比擬的優(yōu)越性。

雙目立體視覺應(yīng)用的部分領(lǐng)域包括：高山地區(qū)的電力線監(jiān)測、房屋建造抹墻機器人、衛(wèi)星遙感監(jiān)測圖像分析、醫(yī)學(xué)成像分析、安全檢測系統(tǒng)等。

雙目立體視覺越來越多的被應(yīng)用在我們的平常生活當(dāng)中，例如，虛擬現(xiàn)實構(gòu)造空間配合虛擬現(xiàn)實技術(shù)，雙目立體視覺可以恢復(fù)出難以示眾的物品，例如，文物，墨寶等高價值易破損的物品。從而可以建造出虛擬文化館。

為實現(xiàn)工業(yè)中汽車、飛機、骨骼和模具外形等物體的三維重建，介紹了基于激光線掃描的雙目立體視覺三維測量系統(tǒng)。2個攝像機同時攝取一個掃描激光光條圖像，經(jīng)過圖像預(yù)處理、光條特征點提取、圖像匹配，利用視差計算出光條上所有點的坐標(biāo)值，即光條處物體的三維信息。

通過坐標(biāo)系之間的轉(zhuǎn)換把各光條統(tǒng)一到同一世界坐標(biāo)系下，得到整個物體的三維重建。三維激光掃描測量系統(tǒng)如下圖所示，硬件部分包括雙CCD攝像機，半導(dǎo)體激光器，電控平移臺以及步進(jìn)電機控制箱。

（1）高精度導(dǎo)航定位、全局環(huán)境語義，雙目視覺導(dǎo)航方案更適合掃地機器人

隨著社會經(jīng)濟發(fā)展水平和人們消費觀念的轉(zhuǎn)變，更具科技屬性的智能規(guī)劃型掃地機器人成為最受費者青睞的智能家居產(chǎn)品。據(jù)數(shù)據(jù)顯示，智能規(guī)劃掃地機器人市場占比從17年的10%提升到18年的59%，其中激光導(dǎo)航占76%，視覺導(dǎo)航系統(tǒng)占24%。

而隨著視覺導(dǎo)航系統(tǒng)在iRobot、戴森等掃地機器人頭部陣營不斷發(fā)酵，關(guān)于視覺導(dǎo)航單目、雙目的技術(shù)問題，也得到了掃地機器人廠商的廣泛關(guān)注。

雙目視覺導(dǎo)航是定位精度更高、系統(tǒng)性更強，更加智能的掃地機器人導(dǎo)航方案，能夠更好地引領(lǐng)掃地機器人向家庭清潔智能助手轉(zhuǎn)變，隨著技術(shù)的不斷進(jìn)步，可以預(yù)見，雙目視覺導(dǎo)航系統(tǒng)將會逐漸成為掃地機器人主流導(dǎo)航定位方案。

（2）200幀高速采集，INDEMIND雙目視覺慣性模組助力立體視覺應(yīng)用升級

面對日益提升的使用需求，為提升產(chǎn)品適用性，INDEMIND深耕不輟，為旗下雙目視覺慣性模組提供了200幀高速環(huán)境獲取能力，滿足了不同場景的使用需求。

以車道檢測為例，在車道檢測環(huán)節(jié)中，視覺需對道路彎曲、陰影、路面變化、標(biāo)識線變化等路況實時反饋分析，并通過深度學(xué)習(xí)算法，自動生成車輛最佳行駛路線。

而想要實現(xiàn)快速機動反應(yīng)，便需要高速的環(huán)境采集能力，INDEMIND雙目視覺慣性模組的圖像采集幀率可達(dá)到200幀，在遇到車道變化時，雙目視覺慣性模組可以0.005秒/幀的速度快速檢測車道變化，并通過連續(xù)多幀分析車道變化趨勢，為自動駕駛算法提供多方面精準(zhǔn)、快速的環(huán)境信息數(shù)據(jù)，輔助算法實現(xiàn)高機動自動駕駛。

（3）雙目視覺項目在汽車領(lǐng)域的產(chǎn)品落地化

雙目視覺其實在很早的時候就在歐美以及日本，都運用在車載上了。從1999年開始，斯巴魯就已經(jīng)搭載了最早的一個雙目相機，當(dāng)時是日立給它做的。到2016年的時候，寶馬、奔馳、捷豹路虎都在他們最高配的車型上搭載了雙目視覺。

從2016年到現(xiàn)在，雙目立體視覺的發(fā)展趨勢是從頂配的高端車型慢慢向中端甚至低端的車型覆蓋。這里面說明兩個問題，第一是大家對主動安全的意識有提升，第二是在車載視覺傳感器的領(lǐng)域，大家開始慢慢接受雙目的傳感器。

目前博世、大陸、日立、奧托立夫、電裝這些大企業(yè)都在研發(fā)、采用，以及加快腳步推行他們的雙目視覺產(chǎn)品。

雙目視覺芯片發(fā)展的必要性和市場前景

（1）受益于配套基礎(chǔ)設(shè)施不斷完善、制造業(yè)總體規(guī)模持續(xù)擴大、智能化水平不斷提高、政策利好等因素，中國機器視覺市場需求不斷增長。據(jù)數(shù)據(jù)顯示，2018年中國機器視覺市場規(guī)模首次超過100億元。隨著行業(yè)技術(shù)提升、產(chǎn)品應(yīng)用領(lǐng)域更廣泛，未來機器視覺市場將進(jìn)一步擴大，預(yù)計2019年市場規(guī)模將近125億元。

（2）市場空間巨大：據(jù)數(shù)據(jù)顯示，2018年全球機器視覺市場規(guī)模超88億美元。隨著應(yīng)用市場的進(jìn)一步擴大，未來市場需求將進(jìn)一步放量。預(yù)計2019年，全球機器視覺市場規(guī)模將近100億美元。面對如此巨大的市場，并且核心的硬件芯片占了整套視覺系統(tǒng)大概35%的成本的情形下，半導(dǎo)體行業(yè)各個大公司都對此領(lǐng)域虎視眈眈。但是因其技術(shù)壁壘較高，需要有成熟的圖像算法方面積累，半導(dǎo)體公司也不敢貿(mào)然進(jìn)入。

（3）雙目視覺芯片是趨勢：圖像處理算法一開始應(yīng)用是采用服務(wù)器的軟件算法來完成，隨著互聯(lián)網(wǎng)技術(shù)的不斷成熟，會擴展到云端計算來完成，但是這樣對于網(wǎng)絡(luò)帶寬要求非常大，對于云服務(wù)器的計算量要求也非常高。

視頻圖像處理技術(shù)算法的大規(guī)模產(chǎn)業(yè)化應(yīng)用，必然是需要專業(yè)的芯片來完成，該芯片就是機器視覺（CV）芯片。芯片是能夠降低成本，同時提高運算能力的方式，從近年的整個行業(yè)情況來看，計算機視覺作為人工智能領(lǐng)域最重要的方向之一。

（4）機器視覺是強需求：在當(dāng)今這個時代，計算機視覺領(lǐng)域呈現(xiàn)出很多新的趨勢，其中最為顯著的一個，就是應(yīng)用的爆炸性增長。除了手機、個人電腦和工業(yè)檢測之外，計算機視覺技術(shù)在智能安防、機器人、自動駕駛、智慧醫(yī)療、無人機、增強現(xiàn)實（AR）等領(lǐng)域都出現(xiàn)了各種形態(tài)的應(yīng)用方式，計算機視覺迎來了一個應(yīng)用爆炸性增長的時代。

編輯：jq