chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

VX1161助力ADAS相機(jī)視頻回灌的基本過程

Vector維克多 ? 來源:Vector維克多 ? 作者:Vector China ? 2022-11-30 16:45 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

自動(dòng)駕駛汽車和高級駕駛輔助系統(tǒng)(ADAS)的開發(fā)和驗(yàn)證是極其苛刻的過程,包括現(xiàn)實(shí)道路測試和詳盡的實(shí)驗(yàn)室模擬。雖然真實(shí)世界的道路測試是發(fā)布汽車產(chǎn)品之前的最終步驟,但許多公司傾向于盡可能用現(xiàn)實(shí)的模擬或者記錄的真實(shí)世界數(shù)據(jù)來代替它,可控性更強(qiáng),并普遍提高測試質(zhì)量和驗(yàn)證覆蓋率。

作為ADAS系統(tǒng)的主傳感器,相機(jī)應(yīng)用的測試過程除了要驗(yàn)證可用性和安全性外,在開發(fā)早期還要面臨大量的訓(xùn)練過程來改進(jìn)算法。這個(gè)過程需要用構(gòu)建好的道路場景庫,即錄制好的大量視頻文件作為激勵(lì),在實(shí)驗(yàn)室環(huán)境回放視頻流給被測設(shè)備(DUT),通常是ADAS域控制器或者中央計(jì)算自動(dòng)駕駛平臺(tái)。

視頻回灌功能極大地簡化了實(shí)驗(yàn)室環(huán)境中的研發(fā)和測試。例如,計(jì)算機(jī)視覺系統(tǒng)可以在實(shí)驗(yàn)室調(diào)試,根據(jù)特定的駕駛情況循環(huán),無需額外的試駕。

1

技術(shù)要求

在回灌視頻時(shí),ECU和相機(jī)斷開連接,需要一個(gè)特定的板卡來回放原始視頻數(shù)據(jù),并且保證回放的準(zhǔn)確度和精度。

VX1161是專為高帶寬數(shù)據(jù)采集和傳輸設(shè)計(jì)的可配置的多通道接口設(shè)備,其中面向Streaming應(yīng)用的VX1161.5x系列板卡具有下述特點(diǎn):

1.

支持廣泛的標(biāo)準(zhǔn)的攝像頭接口

通常ECU和相機(jī)之間是通過串行解串技術(shù)來傳輸視頻流,常見的串行解串協(xié)議有FPD-LINK III和GMSL2等。VX1161.5x系列具有多種型號的板卡可以接收、發(fā)送和路由不同協(xié)議的數(shù)據(jù)流,例如:

VX1161.51A 2xTAP TI954/TI953支持兩路FPD-LINK III協(xié)議的視頻流記錄和回放;

VX1161.51C 2xTAP MX9296A/MX9295A支持兩路GMSL2協(xié)議的視頻流記錄和回放。

2.

實(shí)時(shí)性和高帶寬

在有效地復(fù)現(xiàn)完整的測試車輛多攝像頭視頻系統(tǒng)和車載數(shù)據(jù)總線時(shí),通常數(shù)據(jù)量可能高達(dá)幾個(gè)G,需要保證從讀取文件到傳輸數(shù)據(jù)的高帶寬,從而保證回放的時(shí)間準(zhǔn)確度。

VX1161的10G以太網(wǎng)接口可以高效接收來自回灌工作站(Replay Station)的視頻流。

3.

同步性

VX1161板卡支持PTP同步功能,可以實(shí)現(xiàn)多通道的時(shí)間同步,同時(shí)其他支持PTP的總線設(shè)備也可以在一個(gè)時(shí)間域內(nèi)同步回放,確保同步傳感器和總線數(shù)據(jù)回放,且抖動(dòng)最小。

4.

模塊化

VX1161板卡均為模塊化設(shè)計(jì),可根據(jù)使用需求靈活組合。同時(shí)VX1161板卡的回放API可以被CANoe的CAPL腳本調(diào)用,從而便于集成其它的系統(tǒng)測試過程。

2

視頻回灌原理

d84caa70-7088-11ed-8abf-dac502259ad0.png

圖2 視頻回灌原理

通過VX1161視頻回灌的基本過程如下:

1)

CANoe作為系統(tǒng)的主控軟件

負(fù)責(zé)控制CAPL腳本的編輯和執(zhí)行;

2)

CAPL腳本調(diào)用Stream Provider動(dòng)態(tài)鏈接庫中的API函數(shù)

負(fù)責(zé)加載視頻文件(MF4);

連接VX1161板卡;

控制VX1161板卡開始和停止回灌;

3)

VP75xx回灌工作站(Replay Station)

負(fù)責(zé)存儲(chǔ)和讀取視頻文件的視頻流;

通過10G以太網(wǎng)將視頻流輸出到視頻硬件板卡;

4)

VX1161作為視頻回灌硬件

負(fù)責(zé)接收來自VP75xx回灌工作站的視頻流;

接收來自CANoe的控制命令;

通過各個(gè)板卡的GMSL2或FPDLINKIII串行器傳輸視頻流到ECU接收端。

視頻回灌中的時(shí)間同步機(jī)制

在視頻回灌中,如果涉及以下場景通常需要設(shè)計(jì)同步機(jī)制:

1)

多通道的視頻同步回灌,例如自動(dòng)泊車(APA)環(huán)視攝像頭;

2)

在回灌視頻的同時(shí),回灌其他傳感器或者ECU系統(tǒng)記錄的數(shù)據(jù),例如CAN總線數(shù)據(jù)等等。

VX1161在回灌時(shí)通常使用PTP同步機(jī)制(亦支持其它同步機(jī)制,如GPIO),VTSS(Vector Time Synchronization Service)同步服務(wù)確保連接在VP75xx上的多個(gè)設(shè)備可以同步到一個(gè)時(shí)間域,板卡的視頻流按照PTP時(shí)間進(jìn)行回放,每幀的播放時(shí)間需要在Stream Provider中計(jì)算并發(fā)送給板卡。具體過程如下:

d875f0d8-7088-11ed-8abf-dac502259ad0.png

圖3 視頻回灌系統(tǒng)的同步連接

1)

PTP主時(shí)鐘提供整個(gè)仿真系統(tǒng)的時(shí)間。

所有設(shè)備作為PTP從節(jié)點(diǎn)(Slave)被同步,包括VX1161的所有板卡,VN56xx等支持PTP功能的以太網(wǎng)接口卡;

其他不支持PTP的板卡可通過同步線連接到VN56xx來實(shí)現(xiàn)硬線同步。

2)

在開始回灌時(shí),CANoe通過CAPL腳本從支持PTP的接口卡(如VN56xx,VX1161.41A/B)獲取PTP時(shí)鐘

3)

CANoe調(diào)用并初始化Stream Provider。

4)

Stream Provider打開本地的視頻回灌文件并讀取圖像的時(shí)間戳,通過相對時(shí)間換算每一幀圖像的播放時(shí)間。

5)

VX1161.51板卡接收緩存圖像和播放時(shí)間,比較PTP時(shí)間和預(yù)設(shè)的播放時(shí)間,當(dāng)?shù)竭_(dá)播放時(shí)間時(shí),圖像會(huì)按照CSI包送到串行器;ECU通過解串器接收視頻流。

以四路回放為例,CANoe在獲取當(dāng)前的PTP時(shí)間后并沒有控制板卡立即回放,而是緩存圖像等待第一幀圖像時(shí)間對齊后同時(shí)回放。

在回放后的每一幀都是對齊的,因?yàn)椋?/p>

所有圖像幀的第一幀啟動(dòng)時(shí)間是相同的;

所有通道的文件里每幀時(shí)間是對齊的;

每一個(gè)板卡的通道都同步在一個(gè)PTP時(shí)間域,板卡是按照PTP絕對時(shí)間進(jìn)行回放。

每一幀的實(shí)際回放時(shí)間就是由三部分累加產(chǎn)生的:

Presentation time = CANoe PTP time (start replay) + delay time + MDF frame time stamp

d8a3970e-7088-11ed-8abf-dac502259ad0.png

圖4 視頻回灌系統(tǒng)的同步時(shí)間

3

實(shí)例解析

d8c46970-7088-11ed-8abf-dac502259ad0.png

圖5 回灌系統(tǒng)的實(shí)例

本實(shí)例通過另外一組VX1161板卡來接收回灌數(shù)據(jù),從而模擬ECU接收視頻流的過程,同時(shí)驗(yàn)證回灌視頻的同步性。

在回灌系統(tǒng)中,設(shè)置VX1161.51板卡通道2和通道4為發(fā)送模式(TX only),并將其IP地址分別設(shè)為192.168.10.12和192.168.10.13,這樣可以回放4路視頻。這些通道都已集成CSI串行器,并配置相應(yīng)的寄存器。

與之對應(yīng)的,設(shè)置VX1161.51板卡通道1和通道3為接收模式(RX only),并將其IP地址分別設(shè)為192.168.20.12和192.168.20.14的,這樣可以同時(shí)接收4路視頻。這些通道上都已集成CSI解串器,并配置相應(yīng)的寄存器。

d8f62c58-7088-11ed-8abf-dac502259ad0.png

圖6 VX1161板卡的模式配置

d9273fe6-7088-11ed-8abf-dac502259ad0.png

圖7 CANoe的視頻回灌4路發(fā)送界面

在CANoe中通過Panel面板可以設(shè)置管理回灌板卡的IP和通道,并關(guān)聯(lián)回灌的視頻MF4文件。在點(diǎn)擊Group control Start/Stop時(shí),CANoe會(huì)觸發(fā)相應(yīng)的CAPL腳本控制板卡開始或停止回灌。

d963fdf0-7088-11ed-8abf-dac502259ad0.png

圖8 CANape接收4路回灌的視頻界面

與此同時(shí),CANape可以同時(shí)接收4路視頻并預(yù)覽圖像,每個(gè)接收通道之間也是PTP同步的,這樣可以判斷每路視頻的幀同步的情況。






審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 傳感器
    +關(guān)注

    關(guān)注

    2574

    文章

    54442

    瀏覽量

    786481
  • ecu
    ecu
    +關(guān)注

    關(guān)注

    14

    文章

    967

    瀏覽量

    56899
  • adas
    +關(guān)注

    關(guān)注

    311

    文章

    2300

    瀏覽量

    211562
  • DUT
    DUT
    +關(guān)注

    關(guān)注

    0

    文章

    193

    瀏覽量

    13380

原文標(biāo)題:VX1161助力ADAS相機(jī)視頻回灌

文章出處:【微信號:VectorChina,微信公眾號:Vector維克多】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    深入解析封膠:固化原理、過程與關(guān)鍵影響因素

    有機(jī)硅封膠的固化過程是其應(yīng)用中的核心環(huán)節(jié),直接決定了最終產(chǎn)品的性能與可靠性。施奈仕團(tuán)隊(duì)將為您系統(tǒng)解讀有機(jī)硅封膠的固化原理、過程演進(jìn)及影響固化效果的關(guān)鍵因素。一、固化原理:交聯(lián)反應(yīng)構(gòu)
    的頭像 發(fā)表于 12-11 15:14 ?70次閱讀
    深入解析<b class='flag-5'>灌</b>封膠:固化原理、<b class='flag-5'>過程</b>與關(guān)鍵影響因素

    定制封膠_特殊場景封膠定制化服務(wù)流程與案例

    什么是封膠定制化? 封膠定制化是指根據(jù)客戶具體的應(yīng)用場景、工作環(huán)境、性能要求(如耐溫、耐腐蝕、耐老化、導(dǎo)熱、阻燃等)以及產(chǎn)品結(jié)構(gòu),量身研發(fā)和生產(chǎn)專屬配方的封膠產(chǎn)品。不同于通用型產(chǎn)品,定制
    的頭像 發(fā)表于 11-25 01:21 ?138次閱讀
    定制<b class='flag-5'>灌</b>封膠_特殊場景<b class='flag-5'>灌</b>封膠定制化服務(wù)流程與案例

    線路板用什么膠封?

    在線路板制造領(lǐng)域,封工藝是提升產(chǎn)品可靠性、延長使用壽命的關(guān)鍵技術(shù)。選擇合適的封膠,能為電子設(shè)備提供全方位的保護(hù)。
    的頭像 發(fā)表于 09-20 17:12 ?470次閱讀
    線路板用什么膠<b class='flag-5'>灌</b>封?

    【實(shí)測】一個(gè)模塊 大幅降低云卓G12遙控+圖傳視頻傳輸延遲

    大都是相機(jī)延遲,控制端延遲等。無人機(jī)視頻傳的一般流程是無人機(jī)在天空端實(shí)時(shí)拍攝視頻,然后視頻傳輸?shù)綗o人機(jī)遙控器,地面端就能夠?qū)崟r(shí)查看
    的頭像 發(fā)表于 09-17 17:54 ?908次閱讀
    【實(shí)測】一個(gè)模塊 大幅降低云卓G12遙控+圖傳<b class='flag-5'>視頻</b>傳輸延遲

    創(chuàng)想智控焊接熔池相機(jī),打造焊接過程的“智慧之眼”

    ,及時(shí)、準(zhǔn)確地掌握熔池動(dòng)態(tài)?今天一起了解創(chuàng)想智控焊接熔池相機(jī),打造焊接過程的“智慧之眼”。 實(shí)時(shí)監(jiān)控,焊接過程可視化 創(chuàng)想智控焊接熔池相機(jī)通過高動(dòng)態(tài)成像技術(shù),能夠在高亮弧光與暗背景的強(qiáng)
    的頭像 發(fā)表于 08-26 14:03 ?402次閱讀
    創(chuàng)想智控焊接熔池<b class='flag-5'>相機(jī)</b>,打造焊接<b class='flag-5'>過程</b>的“智慧之眼”

    相機(jī)傳感器物理建模中的畸變設(shè)計(jì)

    在自動(dòng)駕駛感知系統(tǒng)中,相機(jī)傳感器的應(yīng)用十分廣泛,無論是前視,側(cè)視,環(huán)視甚至車內(nèi),相機(jī)傳感器都發(fā)揮著至關(guān)重要的作用,目前帶有ADAS和自動(dòng)駕駛功能的汽車,大多配備七八個(gè)甚至十幾個(gè)相機(jī)傳感
    的頭像 發(fā)表于 08-12 16:59 ?2143次閱讀
    <b class='flag-5'>相機(jī)</b>傳感器物理建模中的畸變設(shè)計(jì)

    無刷直流電機(jī)助力式EPS控制器設(shè)計(jì)與試驗(yàn)

    MC33034P120為驅(qū)動(dòng)模塊的 EPS 控制器硬件;分析了EPS的助力、正和阻尼控制對控制器硬件的要求,給出了EPS 控制軟件的主程序和 A/D、速度信號采集與中斷服務(wù)子程序流程;最后將BLDCM 助力式EIS
    發(fā)表于 07-08 19:28

    相機(jī)模組膠水檢測

    相機(jī)
    海伯森技術(shù)
    發(fā)布于 :2025年05月19日 15:07:45

    堆焊過程熔池相機(jī)實(shí)時(shí)缺陷檢測技術(shù)

    ,影響生產(chǎn)效率和成本。今天一起了解創(chuàng)想智控堆焊過程熔池相機(jī)實(shí)時(shí)缺陷檢測技術(shù),看如何實(shí)現(xiàn)焊接過程的智能化監(jiān)控,大幅提升焊接質(zhì)量與生產(chǎn)效率。 技術(shù)原理 高速成像與動(dòng)態(tài)曝光 創(chuàng)想智控熔池監(jiān)控相機(jī)
    的頭像 發(fā)表于 05-15 17:34 ?582次閱讀
    堆焊<b class='flag-5'>過程</b>熔池<b class='flag-5'>相機(jī)</b>實(shí)時(shí)缺陷檢測技術(shù)

    ADAS1000 adi

    電子發(fā)燒友網(wǎng)為你提供ADI(ADI)ADAS1000相關(guān)產(chǎn)品參數(shù)、數(shù)據(jù)手冊,更有ADAS1000的引腳圖、接線圖、封裝手冊、中文資料、英文資料,ADAS1000真值表,ADAS1000
    發(fā)表于 03-10 18:37
    <b class='flag-5'>ADAS</b>1000 adi

    ADAS1000-2 adi

    電子發(fā)燒友網(wǎng)為你提供ADI(ADI)ADAS1000-2相關(guān)產(chǎn)品參數(shù)、數(shù)據(jù)手冊,更有ADAS1000-2的引腳圖、接線圖、封裝手冊、中文資料、英文資料,ADAS1000-2真值表,ADAS
    發(fā)表于 03-10 18:37
    <b class='flag-5'>ADAS</b>1000-2 adi

    焊接熔池監(jiān)控相機(jī)如何助力自動(dòng)化生產(chǎn)

    智控焊接熔池監(jiān)控相機(jī)如何助力自動(dòng)化生產(chǎn),并提升焊接過程的精度、穩(wěn)定性和效率。 1.提升焊接質(zhì)量 焊接熔池是焊接過程中金屬熔化區(qū)域,熔池的形態(tài)直接影響焊縫的質(zhì)量。傳統(tǒng)的人工肉眼的監(jiān)控方式
    的頭像 發(fā)表于 01-20 15:50 ?698次閱讀
    焊接熔池監(jiān)控<b class='flag-5'>相機(jī)</b>如何<b class='flag-5'>助力</b>自動(dòng)化生產(chǎn)

    如何在播放視頻過程中插入音頻

    ZDP14x0是一款基于開源GUI引擎的圖像顯示專用驅(qū)動(dòng)芯片,可以通過串口或者SPI與其他芯片通信,且能播放視頻。本文將介紹如何在播放視頻過程中插入音頻。
    的頭像 發(fā)表于 12-26 11:13 ?1993次閱讀
    如何在播放<b class='flag-5'>視頻</b><b class='flag-5'>過程</b>中插入音頻

    康謀分享 | 如何應(yīng)對ADAS/AD海量數(shù)據(jù)處理挑戰(zhàn)?

    如何有效處理ADAS/AD海量數(shù)據(jù)并從中獲得見解?IVEX數(shù)據(jù)處理流程可自動(dòng)從原始傳感器數(shù)據(jù)等輸入中識別出值得關(guān)注的事件和場景,推動(dòng)數(shù)據(jù)高效低成本處理,助力開發(fā)測試!
    的頭像 發(fā)表于 12-25 10:05 ?4281次閱讀
    康謀分享 | 如何應(yīng)對<b class='flag-5'>ADAS</b>/AD海量數(shù)據(jù)處理挑戰(zhàn)?

    ADAS高級駕駛輔助系統(tǒng)

    自動(dòng)駕駛AD的過程性技術(shù)。ADAS采用許多傳感器來提高車輛安全性并提供廣泛的自動(dòng)駕駛功能,其中包括常用的四種傳感器類型。首先是攝像頭傳感器,這種基于攝像頭的解決方
    的頭像 發(fā)表于 12-20 15:58 ?2384次閱讀
    <b class='flag-5'>ADAS</b>高級駕駛輔助系統(tǒng)