NVIDIA近日與美國(guó)UMass Amherst大學(xué)、UC Merced大學(xué)研究人員,開發(fā)出利用AI人工智能技術(shù),可以將普通常見的30fps進(jìn)行智能插幀計(jì)算,可以獲得240/480fps的慢動(dòng)作視頻。這個(gè)對(duì)于視頻內(nèi)容創(chuàng)作者來(lái)說(shuō)可是個(gè)巨大福利,在一些需要慢放的鏡頭不再需要專門高幀率攝像頭機(jī),只要通過(guò)AI運(yùn)算就能獲得讓人覺得流暢慢動(dòng)作視頻。
我們都知道現(xiàn)在所謂的,其實(shí)是在一秒內(nèi)播放多幀畫面,讓我們感覺到它是在不停變化中,這個(gè)與人眼的視覺暫留現(xiàn)象有關(guān)系。而一秒鐘播放的幀數(shù)越多,我們感覺就視頻越流暢,高幀率視頻而且經(jīng)過(guò)后期剪輯處理,還能做出非常多有意思的視頻。
研究人員提到,盡管現(xiàn)在的手機(jī)可以拍攝240fps甚至更高幀率的慢動(dòng)作視頻,但由于高幀率需要龐大的緩存和數(shù)據(jù)寫入系統(tǒng),普通設(shè)備都是撐不住的,用他們來(lái)長(zhǎng)時(shí)間紀(jì)錄是不切實(shí)際的。而他們通過(guò)使用NVIDIA Tesla V100顯卡以及cuDNN深度神經(jīng)網(wǎng)絡(luò)每天對(duì)超過(guò)11000個(gè)240fps視頻進(jìn)行訓(xùn)練,訓(xùn)練完成的模型可以將普通30fps視頻插幀成240fps的視頻,同時(shí)還會(huì)有獨(dú)立的來(lái)驗(yàn)證他們插幀內(nèi)容準(zhǔn)確性,是否符合原視頻的效果。
而之前絕大部分的插幀技術(shù)都是利用前后幀的關(guān)系生成更多的中間幀,NVIDIA與大學(xué)研究員則是只利用其中的一幀就可以辦到,因此插幀數(shù)目顯著提高,還能保持圖像不失真,不影響觀看效果。
據(jù)悉,這項(xiàng)技術(shù)將在本周舉辦的計(jì)算機(jī)視覺和模式年度參考會(huì)議上發(fā)布。最后,盡管這項(xiàng)技術(shù)很有前景,但英偉達(dá)覺得它尚未做好向消費(fèi)級(jí)市場(chǎng)推出的準(zhǔn)備。在此之前,該公司仍需大量的優(yōu)化,才能讓系統(tǒng)做到實(shí)時(shí)運(yùn)行。
-
視頻
+關(guān)注
關(guān)注
6文章
1972瀏覽量
73938 -
人工智能
+關(guān)注
關(guān)注
1807文章
49029瀏覽量
249561
原文標(biāo)題:GGAI 前沿 | NVIDIA AI黑科技,30fps可插幀成480fps慢動(dòng)作視頻
文章出處:【微信號(hào):ggservicerobot,微信公眾號(hào):高工智能未來(lái)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
在Windows上Y8的流媒體FPS低于Y12是什么原因造成的?
智慧路燈如何應(yīng)用人工智能技術(shù)

評(píng)論