資料介紹
1.1概述
汽車是現代社會最為有效、使用最為廣泛的交通工具之一,是維持人們正常生活工作所不可或缺的一部分。然而,汽車的大量涌現,日益頻繁的交通堵塞和交通事故,嚴重影響到人們日常生活的方便和工作的效率,甚至危害到人們的生命安全。研究分析表明,每個交通事故均不同程度地涉及到駕駛員、汽車和道路環(huán)境因素,而與駕駛員因素有關的事故約占九成,駕駛員的人為失誤已經被公認為是交通事故的主要原因。如何減少“人”在交通系統中發(fā)揮的不確定因素,已經成為汽車安全領域研究的重點。通過先進的技術手段增強駕駛員感知能力,甚至替代部分駕駛任務,為車輛提供日益完善的安全預警和輔助駕駛功能,逐步實現車輛的智能化,并最終走向完全無人駕駛的智能車輛,必將是解決交通安全問題的根本途徑。
隨著圖像處理和計算機視覺的快速發(fā)展,越來越多的先進技術被應用到汽車電子領域,傳統的基于圖像的輔助駕駛只在汽車車尾安裝倒車攝像頭,只能覆蓋汽車周圍的有限區(qū)域,而車兩側和前方的視覺盲區(qū)無疑增加了安全駕駛的隱患。
我們具有自主知識產權的車載全景視覺技術是將分布安裝于車輛周邊的圖像傳感器捕捉的圖像進行合成和投影,在人機界面虛擬一個單一的全景圖像,并且這個圖像時無盲區(qū)的,能夠360°的觀察車身周邊的狀況。同時,這個圖像經過合成和投影,形成符合人的思維習慣的全景圖像。
1.2研究現狀
車載傳感器類型如表1所示,在這其中,全景視覺傳感器技術受到越來越多的關注,并成為車載電子裝置未來發(fā)展的主要方向。屬于視覺感知技術之一的全景視覺傳感器技術是智能感知交通環(huán)境重要的技術手段,它可以全方位、全天候、全時段地監(jiān)視、分析和記錄車內外的情況,為報警系統、控制系統和安全避讓系統提供最直觀的狀態(tài)信息,也為車輛和乘員的安全保護提供了事前告之、過程記錄和事后重現的技術手段。特別是在復雜的道路環(huán)境下,通過全面的視覺技術,可以使駕駛者的觀察得以延伸和擴大,真正做到“眼觀六路”,掌控全局。
車載全景視覺傳感器分為兩種,即把拍攝的圖像提供給駕駛者觀看的“顯示用視覺傳感器”,以及把拍攝的圖像傳送至計算機進行處理的“處理用視覺傳感器”。 車載全景視覺傳感器今后的發(fā)展趨勢有如下幾個方面:
?。?)處理用視覺傳感器的迅速普及;
?。?)處理用視覺傳感器的多功能化;
?。?)顯示用視覺傳感器和處理用視覺傳感器的融合。
表1:各種行駛傳感技術的比較
行駛傳感技術技術特點缺點探測范圍
超聲波成本低、探測精確。范圍小、受雨雪影響。《5m
脈沖雷達測量距離遠、精確。波束窄,只適合前后盲區(qū)探測?!?00m
多普勒雷達測量距離遠、測量精確、可多天線矩陣配合使用。系統復雜、成本高?!?00m
射頻標識互相通知位置、成本低,系統可靠。必須為每個設備、人裝備發(fā)射標識,使用不方便?!?00m
全景系統360度全景、直觀(非量化信息)有效性高、有良好的人機界面、便于再現重放?!?00m
在BMW和NISSAN的高端車型上,已經開始使用多個攝像頭來輔助駕駛員的操作和泊車,在VOLVO的XC60,XC90等概念車型上,已經開始使用圖像識別技術來輔助駕駛人員的并線和巡航操作。在LEXUS的部分概念車型上,也有使用單目攝像頭來進行簡單的自動泊車的演示系統。
根據第三方的市場研究公司 Techno Systems Research (TSR) 的研究指出,在 2008 年時約有 20% 的新車配備整合式攝影機,而到了 2012 年時預計將增加到接近 70%,并且會有很大比例新車安裝至少2個以上攝像機,車用視頻裝置即將成為各類車輛的主流配置。
表2:已采用視覺感知技術的汽車領域應用比較
形態(tài)廠商功能技術含量備注
低端產品倒車后視鏡眾多小品牌后方視頻低產品成熟
中低端
產品倒車可視系統國內的銀聲、
合正等后方視頻
雷達測距
GPS低產品成熟
中高端
產品倒車可視系統
車載多媒體常見于高端車型后方視頻(側方視頻)
多媒體功能
GPS低產品成熟
研發(fā)類
產品夜視和行人檢測豐田夜視攝像頭提供紅外圖像,通過紅外攝像頭頭實現行人,動物檢測較高研發(fā)階段
可視全景系統日產汽車
松下電器
三洋電機多攝像頭實時視頻合成無盲區(qū)全景俯視圖高研發(fā)階段
主動駕駛輔助系統富士重工通過雙目攝像頭主動探測前方行人,車輛,障礙的距離,以攝像頭模擬人眼。高研發(fā)階段
圖像能夠提供給使用者最直觀高效的輔助信息。人類大腦的模糊思維和判斷能力決定了,人隨意掃視圖像所獲得的信息量和信息準確性遠遠大于費力地觀察若干儀表所能得到的信息量和信息準確性,并且圖像方式得到的信息更加直觀可靠。如表2所示,可以預見在不遠的將來,基于全景視覺傳感器技術和圖像識別技術來實現輔助駕駛和安全功能的系統將廣泛應用于各類車輛,進而成為無人駕駛汽車和智能導航系統的關鍵技術。
本設計的最終目標就是要給出基于FPGA技術來構架SOC實現的以全景視覺處理為基礎的汽車環(huán)視系統。通過4路廣角攝像頭實時采集數據,并將采集到的4路視頻數據進行預處理和配準拼接等一系列處理實現360度的實時全景視覺圖像,并通過VGA顯示器進行顯示。
研究方法和技術路線
在系統構成方面,系統主要分為三個部分,圖像采集、圖像處理及顯示。圖像的采集是使用4路模擬攝像頭,通過自行設計的視頻采集電路板接入圖像,并通過DMA將實時圖像數據搬到存儲器中。這里采用了NTSC制式的模擬攝像頭,攝像頭的性能和顯示效果一般。我們的研究重點是采用更加高效的算法和設計思路,在目前有限的資源條件下,最大限度的利用資源以達到最佳的設計和顯示效果。
汽車是現代社會最為有效、使用最為廣泛的交通工具之一,是維持人們正常生活工作所不可或缺的一部分。然而,汽車的大量涌現,日益頻繁的交通堵塞和交通事故,嚴重影響到人們日常生活的方便和工作的效率,甚至危害到人們的生命安全。研究分析表明,每個交通事故均不同程度地涉及到駕駛員、汽車和道路環(huán)境因素,而與駕駛員因素有關的事故約占九成,駕駛員的人為失誤已經被公認為是交通事故的主要原因。如何減少“人”在交通系統中發(fā)揮的不確定因素,已經成為汽車安全領域研究的重點。通過先進的技術手段增強駕駛員感知能力,甚至替代部分駕駛任務,為車輛提供日益完善的安全預警和輔助駕駛功能,逐步實現車輛的智能化,并最終走向完全無人駕駛的智能車輛,必將是解決交通安全問題的根本途徑。
隨著圖像處理和計算機視覺的快速發(fā)展,越來越多的先進技術被應用到汽車電子領域,傳統的基于圖像的輔助駕駛只在汽車車尾安裝倒車攝像頭,只能覆蓋汽車周圍的有限區(qū)域,而車兩側和前方的視覺盲區(qū)無疑增加了安全駕駛的隱患。
我們具有自主知識產權的車載全景視覺技術是將分布安裝于車輛周邊的圖像傳感器捕捉的圖像進行合成和投影,在人機界面虛擬一個單一的全景圖像,并且這個圖像時無盲區(qū)的,能夠360°的觀察車身周邊的狀況。同時,這個圖像經過合成和投影,形成符合人的思維習慣的全景圖像。
1.2研究現狀
車載傳感器類型如表1所示,在這其中,全景視覺傳感器技術受到越來越多的關注,并成為車載電子裝置未來發(fā)展的主要方向。屬于視覺感知技術之一的全景視覺傳感器技術是智能感知交通環(huán)境重要的技術手段,它可以全方位、全天候、全時段地監(jiān)視、分析和記錄車內外的情況,為報警系統、控制系統和安全避讓系統提供最直觀的狀態(tài)信息,也為車輛和乘員的安全保護提供了事前告之、過程記錄和事后重現的技術手段。特別是在復雜的道路環(huán)境下,通過全面的視覺技術,可以使駕駛者的觀察得以延伸和擴大,真正做到“眼觀六路”,掌控全局。
車載全景視覺傳感器分為兩種,即把拍攝的圖像提供給駕駛者觀看的“顯示用視覺傳感器”,以及把拍攝的圖像傳送至計算機進行處理的“處理用視覺傳感器”。 車載全景視覺傳感器今后的發(fā)展趨勢有如下幾個方面:
?。?)處理用視覺傳感器的迅速普及;
?。?)處理用視覺傳感器的多功能化;
?。?)顯示用視覺傳感器和處理用視覺傳感器的融合。
表1:各種行駛傳感技術的比較
行駛傳感技術技術特點缺點探測范圍
超聲波成本低、探測精確。范圍小、受雨雪影響。《5m
脈沖雷達測量距離遠、精確。波束窄,只適合前后盲區(qū)探測?!?00m
多普勒雷達測量距離遠、測量精確、可多天線矩陣配合使用。系統復雜、成本高?!?00m
射頻標識互相通知位置、成本低,系統可靠。必須為每個設備、人裝備發(fā)射標識,使用不方便?!?00m
全景系統360度全景、直觀(非量化信息)有效性高、有良好的人機界面、便于再現重放?!?00m
在BMW和NISSAN的高端車型上,已經開始使用多個攝像頭來輔助駕駛員的操作和泊車,在VOLVO的XC60,XC90等概念車型上,已經開始使用圖像識別技術來輔助駕駛人員的并線和巡航操作。在LEXUS的部分概念車型上,也有使用單目攝像頭來進行簡單的自動泊車的演示系統。
根據第三方的市場研究公司 Techno Systems Research (TSR) 的研究指出,在 2008 年時約有 20% 的新車配備整合式攝影機,而到了 2012 年時預計將增加到接近 70%,并且會有很大比例新車安裝至少2個以上攝像機,車用視頻裝置即將成為各類車輛的主流配置。
表2:已采用視覺感知技術的汽車領域應用比較
形態(tài)廠商功能技術含量備注
低端產品倒車后視鏡眾多小品牌后方視頻低產品成熟
中低端
產品倒車可視系統國內的銀聲、
合正等后方視頻
雷達測距
GPS低產品成熟
中高端
產品倒車可視系統
車載多媒體常見于高端車型后方視頻(側方視頻)
多媒體功能
GPS低產品成熟
研發(fā)類
產品夜視和行人檢測豐田夜視攝像頭提供紅外圖像,通過紅外攝像頭頭實現行人,動物檢測較高研發(fā)階段
可視全景系統日產汽車
松下電器
三洋電機多攝像頭實時視頻合成無盲區(qū)全景俯視圖高研發(fā)階段
主動駕駛輔助系統富士重工通過雙目攝像頭主動探測前方行人,車輛,障礙的距離,以攝像頭模擬人眼。高研發(fā)階段
圖像能夠提供給使用者最直觀高效的輔助信息。人類大腦的模糊思維和判斷能力決定了,人隨意掃視圖像所獲得的信息量和信息準確性遠遠大于費力地觀察若干儀表所能得到的信息量和信息準確性,并且圖像方式得到的信息更加直觀可靠。如表2所示,可以預見在不遠的將來,基于全景視覺傳感器技術和圖像識別技術來實現輔助駕駛和安全功能的系統將廣泛應用于各類車輛,進而成為無人駕駛汽車和智能導航系統的關鍵技術。
本設計的最終目標就是要給出基于FPGA技術來構架SOC實現的以全景視覺處理為基礎的汽車環(huán)視系統。通過4路廣角攝像頭實時采集數據,并將采集到的4路視頻數據進行預處理和配準拼接等一系列處理實現360度的實時全景視覺圖像,并通過VGA顯示器進行顯示。
研究方法和技術路線
在系統構成方面,系統主要分為三個部分,圖像采集、圖像處理及顯示。圖像的采集是使用4路模擬攝像頭,通過自行設計的視頻采集電路板接入圖像,并通過DMA將實時圖像數據搬到存儲器中。這里采用了NTSC制式的模擬攝像頭,攝像頭的性能和顯示效果一般。我們的研究重點是采用更加高效的算法和設計思路,在目前有限的資源條件下,最大限度的利用資源以達到最佳的設計和顯示效果。
下載該資料的人也在下載
下載該資料的人還在閱讀
更多 >
- 360全景環(huán)視系統 6次下載
- 360全景環(huán)視原理說明
- 360全景環(huán)視發(fā)展歷程
- 松下CMOS圖像傳感器MN34229PL使用手冊 70次下載
- 東芝CCD線性圖像傳感器TCD1702C數據手冊 15次下載
- 壓力傳感器和速度傳感器在汽車系統中的應用及趨勢 35次下載
- 如何實現脈沖陣列式圖像傳感器成像系統的設計 34次下載
- CMOS圖像傳感器的原理參數和CCD圖像傳感器有什么區(qū)別等資料概述 59次下載
- 汽車環(huán)視系統設計完整硬件平臺設計方案 19次下載
- 汽車圖像傳感器的應用 0次下載
- 高級駕駛輔助系統(ADAS)汽車環(huán)視技術簡述 15次下載
- 基于圖像傳感器的太陽方位檢測系統研究
- 基于CMOS圖像傳感器的成像系統設計
- 接觸式圖像傳感器的發(fā)展與應用
- 基于CMOS圖像傳感器的成像系統設計
- 索尼圖像傳感器芯片有哪些 714次閱讀
- 圖像傳感器的參數有哪些 741次閱讀
- 圖像傳感器的原理是什么? 626次閱讀
- 機器視覺系統如何選擇圖像傳感器 610次閱讀
- 安森美汽車圖像傳感器發(fā)展趨勢 689次閱讀
- CMOS圖像傳感器的制造工藝 3075次閱讀
- 關于圖像傳感器的圖像質量要糾正的幾個誤區(qū) 426次閱讀
- 對圖像傳感器的認識誤區(qū):傳感器類型 688次閱讀
- 關于圖像傳感器的像素誤區(qū) 624次閱讀
- 關于圖像傳感器圖像質量的四大認知誤區(qū) 608次閱讀
- CMOS圖像傳感器的FPGA邏輯設計解析 6005次閱讀
- cmos圖像傳感器結構_cmos圖像傳感器市場 5510次閱讀
- 汽車:符合AEC-Q100認證的圖像傳感器 5630次閱讀
- 基于DSP和CMOS圖像傳感器的實時圖像采集系統的實現方案 2987次閱讀
- CMOS圖像傳感器的基本原理及設計考慮 8373次閱讀
下載排行
本周
- 1EN60335-1安規(guī)標準 中文版本
- 1.86 MB | 53次下載 | 1 積分
- 2TDA7850音頻功率放大器英文手冊
- 0.39 MB | 1次下載 | 免費
- 3VCC啟動電路(可下載)
- 748.32 KB | 1次下載 | 免費
- 460KW電機控制器硬件驅動電路設計(可下載)
- 720.01 KB | 1次下載 | 免費
- 5LTD1534RFN N溝道增強型功率MOSFET規(guī)格書
- 1.11 MB | 次下載 | 免費
- 6LT1702SI P溝道增強型功率MOSFET規(guī)格書
- 1.04 MB | 次下載 | 免費
- 7LT1713SI N溝道增強型功率MOSFET規(guī)格書
- 0.85 MB | 次下載 | 免費
- 8反電動勢到底如何來理解?(可下載)
- 1.63 MB | 次下載 | 免費
本月
- 1STM32CubeMX用于STM32配置和初始化C代碼生成
- 21.90 MB | 626次下載 | 免費
- 2STM32開發(fā)板教程之STM32開發(fā)指南免費下載
- 24.88 MB | 176次下載 | 3 積分
- 3EN60335-1安規(guī)標準 中文版本
- 1.86 MB | 53次下載 | 1 積分
- 4OAH0428最新規(guī)格書(中文)
- 2.52 MB | 28次下載 | 10 積分
- 5Altium-常用3D封裝庫(Step)接插件篇
- 4.95 MB | 26次下載 | 免費
- 6UHV系列雷電沖擊電壓發(fā)生器試驗裝置詳細說明使用
- 1.07 MB | 17次下載 | 免費
- 7介紹一些常用的電子元器件
- 3.20 MB | 8次下載 | 免費
- 8麻將機升降電路
- 0.12 MB | 6次下載 | 1 積分
總榜
- 1matlab軟件下載入口
- 未知 | 935124次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關降壓/升壓雙向直流/直流轉換器 PCB layout 設計
- 1.48MB | 420063次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233088次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費下載
- 340992 | 191371次下載 | 10 積分
- 5十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183336次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81583次下載 | 10 積分
- 7Keil工具MDK-Arm免費下載
- 0.02 MB | 73814次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65988次下載 | 10 積分
評論