最近在做基于激光信息的機器人行人跟蹤發(fā)現(xiàn)如果單獨利用激光信息很難完成機器人對行人的識別、跟蹤等功能，因此考慮與視覺融合的方法，這樣便可以充分利用激光雷達提供的精確位置信息及視覺提供的豐富紋理、顏色等場景信息。以下是最近調(diào)研視覺SLAM中的實現(xiàn)方法的總結(jié)，包括三方面內(nèi)容：姿態(tài)計算、閉環(huán)檢測、BA優(yōu)化。

姿態(tài)計算

一、通過提取圖像的特征描述子，如ORB、SURF和SIFT等特征描述子，然后通過RANSAC算法進行圖像匹配去除匹配點中的外點，再通過將二維點對映射到三維之后，便可以利用PnP或ICP算法計算相機位姿?；谔卣魈崛〉奈蛔擞嬎闼惴▽鼍坝幸欢ǖ囊螅跓o紋理場景會出現(xiàn)位姿計算失敗的情形。

二、直接圖像匹配方法：直接圖像匹配并不對圖片進行特征提取，核心思想是在旋轉(zhuǎn)坐標系下，基于相機一致性的假設(shè)，在相機的剛體變換已知的情況下，利用相機變換矩陣將目標圖片投影到當前圖片上，其像素之間的差異應(yīng)該最小，將姿態(tài)計算轉(zhuǎn)換為加權(quán)最小二乘問題。直接圖像匹配算法的計算效率很高，不依賴GPU，具有很高的理論和商用價值。

閉環(huán)檢測

閉環(huán)檢測算法指的是通過檢測算法檢測出之前訪問過的場景。如圖1所示，當機器人在移動過程中，特別是在探索大面積的場景時，由于模型的不確定性以及設(shè)備的噪聲，不確定性會逐漸增長。通過引入閉環(huán)檢測技術(shù)，識別出歷史訪問過的場景以增加位姿之間的約束，可以很好的減少這種不確定性。

閉環(huán)檢測前后對比(a) 累計誤差導致的構(gòu)圖錯誤，(b)閉環(huán)約束后的地圖

閉環(huán)檢測方法有：

一、最簡單的閉環(huán)檢測算法是將新檢測出來的關(guān)鍵幀和過去所有的關(guān)鍵幀一一進行比較，雖然這種方法能比較好的檢測出當前場景是否在之前出現(xiàn)過，但是在大規(guī)模場景下，機器人往往有成千上萬個關(guān)鍵幀，這種方法檢測效率及其底下，不能再實際場景中使用。

二、通過將圖像中的特征和整個地圖中的路標對應(yīng)起來，然后建立一個所有路標的數(shù)據(jù)庫，通過使用路標分類器來加快場景識別速度。比如講所有路標構(gòu)建成一棵KD-Tree，當新添加一幀關(guān)鍵幀時，將關(guān)鍵幀在KD-Tree中進行檢索，從中檢索之前出現(xiàn)過的場景。

三、基于視覺詞袋的閉環(huán)檢測方法，這種方法通過將特征描述子抽象成詞匯，通過TF-IDF方法識別出現(xiàn)過的場景。如圖2所示，是閉環(huán)檢測中基于詞袋模型流程圖。使用視覺詞袋的方法效率很高，可用在大規(guī)模地圖的創(chuàng)建上。

BA優(yōu)化

一、問題闡述：同時對三維點位置和相機參數(shù)進行非線性優(yōu)化。

BA原理

二、LM法的原理與優(yōu)勢：

原理：是一種“信賴域”的方法，當收斂速度較快時，增大信賴域使算法趨向于高斯牛頓法；當收斂速度較慢時，減小信賴域使算法趨向于最速下降法。優(yōu)勢：速度快；可以在距離初始值較遠處得到最優(yōu)解。

SLAM優(yōu)化算法對比