資料介紹
針對(duì)計(jì)算機(jī)對(duì)視頻進(jìn)行自動(dòng)標(biāo)注和描述準(zhǔn)確率不高的問題,提出一種基于多特征融合的深度視頻自然語言描述的方法。該方法提取視頻幀序列的空間特征、運(yùn)動(dòng)特征、視頻特征,進(jìn)行特征的融合,使用融合的特征訓(xùn)練基于長(zhǎng)短期記憶( LSTM)的自然語言描述模型。通過不同的特征組合訓(xùn)練多個(gè)自然語言描述模型,在測(cè)試時(shí)再進(jìn)行后期融合,即先選擇一個(gè)模型獲取當(dāng)前輸入的多個(gè)可能的輸出,再使用其他模型計(jì)算當(dāng)前輸出的概率,對(duì)這些輸出的概率進(jìn)行加權(quán)求和,取概率最高的作為輸出。此方法中的特征融合的方法包括前期融合:特征的拼接、不同特征對(duì)齊加權(quán)求和;后期融合:不同特征模型輸出的概率的加權(quán)融合,使用前期融合的特征對(duì)已生成的LSTM模型進(jìn)行微調(diào)。在標(biāo)準(zhǔn)測(cè)試集MSVD上進(jìn)行實(shí)驗(yàn),結(jié)果表明:融合不同類型的特征方法能夠獲得更高評(píng)測(cè)分值的提升;相同類型的特征融合的評(píng)測(cè)結(jié)果不會(huì)高于單個(gè)特征的分值;使用特征對(duì)預(yù)訓(xùn)練好的模型進(jìn)行微調(diào)的方法效果較差。其中使用前期融合與后期融合相結(jié)合的方法生成的視頻自然語言描述得到的METEOR評(píng)測(cè)分值為0.302,比目前查到的最高值高1. 34%,表明該方法可以提升視頻自動(dòng)描述的準(zhǔn)確性。
- PyTorch教程16.7之自然語言推理:微調(diào)BERT
- PyTorch教程16.5之自然語言推理:使用注意力
- 自然語言處理在社會(huì)傳播的應(yīng)用綜述 14次下載
- 基于自然語言功能描述的代碼查詢方法 21次下載
- 基于模板、檢索和深度學(xué)習(xí)的圖像描述生成方法 12次下載
- 基于深度學(xué)習(xí)的自然語言處理對(duì)抗樣本模型 39次下載
- 基于自然語言生成多表SQL語句模板填充的方法 40次下載
- 一種注意力增強(qiáng)的自然語言推理模型aESIM 9次下載
- 自然語言處理的圖像文本建模相關(guān)研究及分析 27次下載
- 實(shí)現(xiàn)強(qiáng)人工智能自然語言理解有哪些思路? 9次下載
- 強(qiáng)人工智能自然語言理解方面的13個(gè)思路詳細(xì)資料免費(fèi)下載 11次下載
- 基于Hadoop集群的自然語言處理平臺(tái)實(shí)現(xiàn) 0次下載
- 組合參考物框架下空間關(guān)系自然語言描述方法 17次下載
- 基于自然語言處理的知識(shí)檢索算法研究 1次下載
- 空間信息自然語言查詢接口的研究與應(yīng)用
- 用于自然語言處理的神經(jīng)網(wǎng)絡(luò)有哪些 1352次閱讀
- 什么是自然語言處理 (NLP) 1279次閱讀
- 自然語言處理技術(shù)的原理的應(yīng)用 613次閱讀
- 神經(jīng)網(wǎng)絡(luò)在自然語言處理中的應(yīng)用 557次閱讀
- 一種基于自然語言的軌跡修正方法 473次閱讀
- 基于用于自然語言生成的“語境調(diào)優(yōu)”技術(shù) 1073次閱讀
- 如何開始使用PyTorch進(jìn)行自然語言處理 2561次閱讀
- 自然語言處理是什么?有什么用? 6258次閱讀
- 多個(gè)視角對(duì)自然語言處理領(lǐng)域進(jìn)行全面梳理 3635次閱讀
- 自然語言處理的ELMO使用 3358次閱讀
- 自然語言處理有明顯和知識(shí)圖譜結(jié)合的趨勢(shì) 5964次閱讀
- 自然語言處理研究的基本問題及發(fā)展趨勢(shì) 8624次閱讀
- 自然語言處理的優(yōu)點(diǎn)有哪些_自然語言處理的5大優(yōu)勢(shì) 2.8w次閱讀
- RNN在自然語言處理中的應(yīng)用 5728次閱讀
- 從語言學(xué)到深度學(xué)習(xí)NLP,一文概述自然語言處理 6399次閱讀
下載排行
本周
- 1DC電源插座圖紙
- 0.67 MB | 2次下載 | 免費(fèi)
- 2AN158 GD32VW553 Wi-Fi開發(fā)指南
- 1.51MB | 2次下載 | 免費(fèi)
- 3AN148 GD32VW553射頻硬件開發(fā)指南
- 2.07MB | 1次下載 | 免費(fèi)
- 4AN111-LTC3219用戶指南
- 84.32KB | 次下載 | 免費(fèi)
- 5AN153-用于電源系統(tǒng)管理的Linduino
- 1.38MB | 次下載 | 免費(fèi)
- 6AN-283: Σ-Δ型ADC和DAC[中文版]
- 677.86KB | 次下載 | 免費(fèi)
- 7SM2018E 支持可控硅調(diào)光線性恒流控制芯片
- 402.24 KB | 次下載 | 免費(fèi)
- 8AN-1308: 電流檢測(cè)放大器共模階躍響應(yīng)
- 545.42KB | 次下載 | 免費(fèi)
本月
- 1ADI高性能電源管理解決方案
- 2.43 MB | 450次下載 | 免費(fèi)
- 2免費(fèi)開源CC3D飛控資料(電路圖&PCB源文件、BOM、
- 5.67 MB | 138次下載 | 1 積分
- 3基于STM32單片機(jī)智能手環(huán)心率計(jì)步器體溫顯示設(shè)計(jì)
- 0.10 MB | 130次下載 | 免費(fèi)
- 4使用單片機(jī)實(shí)現(xiàn)七人表決器的程序和仿真資料免費(fèi)下載
- 2.96 MB | 44次下載 | 免費(fèi)
- 53314A函數(shù)發(fā)生器維修手冊(cè)
- 16.30 MB | 31次下載 | 免費(fèi)
- 6美的電磁爐維修手冊(cè)大全
- 1.56 MB | 24次下載 | 5 積分
- 7如何正確測(cè)試電源的紋波
- 0.36 MB | 17次下載 | 免費(fèi)
- 8感應(yīng)筆電路圖
- 0.06 MB | 10次下載 | 免費(fèi)
總榜
- 1matlab軟件下載入口
- 未知 | 935121次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關(guān)降壓/升壓雙向直流/直流轉(zhuǎn)換器 PCB layout 設(shè)計(jì)
- 1.48MB | 420062次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233088次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費(fèi)下載
- 340992 | 191367次下載 | 10 積分
- 5十天學(xué)會(huì)AVR單片機(jī)與C語言視頻教程 下載
- 158M | 183335次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81581次下載 | 10 積分
- 7Keil工具M(jìn)DK-Arm免費(fèi)下載
- 0.02 MB | 73810次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65988次下載 | 10 積分
評(píng)論