chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

AI助力,老片修復(fù)一直在路上

KSiH_idg_capita ? 來源:大數(shù)據(jù)文摘 ? 2020-06-03 10:53 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

這個視頻來自一位名叫“大谷Spitzer”的博主,據(jù)他所說,接觸老片修復(fù)是一個偶然,整個項目也只花了7天時間就順利完成了。

先來一起看看這驚人的修復(fù)效果。

老視頻

修復(fù)后效果

這樣的畫面大大地滿足了網(wǎng)友們的好奇心。視頻一經(jīng)發(fā)布,在24小時內(nèi)就有了將近50萬的點贊量,10萬+次的轉(zhuǎn)發(fā)和接近3萬的留言。修復(fù)后的視頻把當時的北京城演繹得活靈活現(xiàn),下邊的片段中,左下角小哥呆呆地看著鏡頭,連細微的表情都清晰可見,青澀中帶有一點可愛。想象一下這位表情憨厚的小哥來自一百年前,不禁讓人感慨萬千。

怪不得網(wǎng)友們紛紛贊嘆。有網(wǎng)友表示,不僅整體氛圍沒話說,連細節(jié)部分也分毫畢顯,“每個人臉上都是新奇又不敢接近的表情”。

甚至有網(wǎng)友留言表示,“博物館應(yīng)該收藏你的作品”!

博主在視頻最開始就說道,想用技術(shù)為社會做一些有意義的事情,懷著仰慕的心情,筆者聯(lián)系到了這位“大谷Spizer”,來看看他是怎么說的吧~

7天完工,難在顯卡

整體滿意,顏色上還有不足

自稱將AI視為業(yè)余愛好的大谷如今身在紐約,他透露說,其實這次接觸老片修復(fù)純屬偶然,在搜索其他資料時候,偶然間在YouTube看到了人民日報上傳的一段老北京視頻,在視頻里,100年前的人們恰好也在看鏡頭、和看視頻的人形成了“對視”時,大谷十分有感觸:“有一種穿越時空的感覺”。在這基礎(chǔ)上,他自己又恰好了解相關(guān)技術(shù),為何不將老片上色補幀,做成活靈活現(xiàn)的60幀,和大家分享呢?

100年前熟人見面打招呼的方式

具體到操作上,根據(jù)大谷介紹,可以大致分為補幀、擴分辨率、上色三個環(huán)節(jié),每個環(huán)節(jié)也都用了不同的工具,整體框架的流程則主要參考了Denis Shiryaev在社交媒體上分享的經(jīng)驗貼。

大谷說道,整個項目只用了7天時間,大部分都是硬性的時間消耗,比如補幀需要一到兩天,擴分辨率至少一天,上色也需要花費一天時間,再加上要做到4K60fps,渲染速度很慢。多方考量之下,他把人民日報14分鐘的原片剪到了10分鐘。

相比而言,去年國慶164分鐘修復(fù)版《開國大典》為人們還原了三次戰(zhàn)役勝利到開國大典的歷史過程。除了借助AI,膠片的撕裂、劃痕等都是專業(yè)的修復(fù)師一幀一幀地修補。“修復(fù)過程中,我們70%的時間都在完成資料片鏡頭的修復(fù)工作,”負責該片修復(fù)工作的三維六度公司的首席技術(shù)官周蘇岳曾說道。雖然修復(fù)時間只用了40天,但這卻是600人每天工作20小時的奮戰(zhàn)結(jié)果!

除了硬性的時間消耗,大谷還笑稱,最大的問題就是自己筆記本電腦的顯卡不夠好,“要1070的顯卡才帶得動,否則會out of memory”,迫不得已之下向女朋友求了助。

對于最后的結(jié)果,大谷表示:“還是比較滿意的”,不過在顏色上還存在可以改進的地方。

在視頻中,相信大家也會看到時不時會出現(xiàn)顏色跳來跳去的情況,大谷表示,在補幀之前用工具把老電影中經(jīng)常出現(xiàn)的畫面閃爍去掉了,否則會更嚴重,整體的色彩上,AI的渲染效果也明顯偏淡。

除此之外,大谷這次利用的是國外的一套模型,顯然無法直接將其套用到100年前的中國影片修復(fù)上,在顏色上就無法做到歷史性的準確,視頻中的上色都是AI學習的成果,雖然膚色大致還原了,但是在紅綠服裝等方面的真實性還有待商榷。

也正是考慮到這些不足,大谷對去年參與《開國大典》修復(fù)的工作人員表達了敬意,“AI沒辦法做到藝術(shù)家那么準確,尤其是在歷史方面,而《開國大典》對歷史準確性的要求更高”,隨后他也打趣地說道,或許可以“讓AI看看清宮劇,提升一下準確率”。

就像大谷在視頻開頭所說,他想用技術(shù)做一些對社會有意義的事,在這次視頻爆紅之后,他表現(xiàn)得相當豁達,“太深刻的大意義倒也說不上,主要是想借此讓人們對歷史有所反思。”不少網(wǎng)友指出,視頻中幾乎看不到女性,這正是歷史生動性的體現(xiàn),既有光鮮也有不足,讓大家意識到現(xiàn)在的生活是多么來之不易。

同時,作為老北京人,大谷也想通過視頻分享他的切身感受,讓更多人看到一百年前的民俗,“尤其是上了色幀數(shù)提高之后,感覺確實不一樣,也感慨這一百年的變化”。

對于目前收到得反饋,大谷表示“完全沒想到”,他看了很多評論,也受感觸于一些留言,還有人私信向他表示,給太姥姥看后,也很懷念那個年代。

大谷透露道,這其實是他第一次嘗試做視頻修復(fù),后續(xù)或許會出一期視頻介紹一下具體的操作。對于后續(xù)的視頻更新計劃,他想要介紹一下國內(nèi)已經(jīng)成熟的語音修復(fù)技術(shù)。

AI助力,老片修復(fù)一直在路上

對于這次用到的技術(shù),大谷表示,上色主要還是應(yīng)用在黑白照片和電影上,補幀技術(shù)就可以遍地開花了,比如修復(fù)像素動畫的跳幀問題,或者在動畫領(lǐng)域加以應(yīng)用,因為動畫很多是12幀/秒,甚至6幀/秒,補幀之后效果很好,也終于可以看更流暢的EVA了。

作為一名獨立游戲開發(fā)者,大谷透露他因為做游戲開發(fā)接觸到AI,起初想要了解AI能否為他節(jié)省時間,后來發(fā)現(xiàn)AI能做的不止這些,在社會公益上也有不少應(yīng)用,比如這次的老片修復(fù)。

正如大谷所說,這次的視頻修復(fù)技術(shù)管線參考自Denis Shiryae的影像修復(fù)教程,針對Denis的歐美老片修復(fù),大谷也做過漢化視頻進行了專門的介紹。

【AI高清修復(fù)】1906大地震前的舊金山

視頻鏈接:

https://www.bilibili.com/video/BV1Uf4y1m72n

Denis Shiryaev通過神經(jīng)網(wǎng)絡(luò)修復(fù)老視頻的內(nèi)容今年在油管爆紅了一陣子,他使用Topaz Labs的Gigapixel AI和DAIN圖像編輯應(yīng)用程序?qū)?9世紀的膠片縮放到4K分辨率,不僅將素材增加到4K,還將幀率提高到每秒60幀。

Shiryaev最火的作品是用Gigapixel AI將1896年拍攝的50秒無聲短片《火車進站》(the Arrival of a Train at La Ciotat Station)做成了4K格式,把模糊的原片做成了高清畫質(zhì),完全符合當下的高清視頻標準。

盡管存在一些缺陷,如圖像會出現(xiàn)跳躍或某些細節(jié)依舊模糊,但已經(jīng)很棒了!

Gigapixel AI軟件使用一種專有的插值算法來分析圖像,它可以使圖像更清晰——甚至在放大了600%之后。

再來說說DAIN(深度感知視頻幀插值),它可以將幀想象并插入現(xiàn)有視頻剪輯的關(guān)鍵幀之間。換句話說,DAIN首先分析并映射視頻片段,然后插入在現(xiàn)有圖像之間生成填充圖像。

為了在這段1896年的視頻中達到同樣的效果,Shiryaev添加了足夠多的圖像來將速度提高到60幀每秒。因此,DAIN自動生成,然后在最初記錄的24張圖像之外,每秒添加36張額外的圖像。

Shiryaev的“火車”的視頻修復(fù)版本看起來像是一部使用智能手機或GoPro拍攝的最新電影。與原始視頻相比,效果非常驚人,尤其是在新版本中獲得了流暢性。列車上的陽光反射和月臺上的女士珠寶都被記錄的很完整,也許是最顯著的改進之一。

Shiryaev也用神經(jīng)網(wǎng)絡(luò)對這一修復(fù)視頻進行了著色:從一堆彩色照片開始,將它們轉(zhuǎn)換為黑白,然后訓練神經(jīng)網(wǎng)絡(luò)以重建彩色原稿。

修復(fù)后的視頻傳送門:

https://youtu.be/EqbOhqXHL7E

Shiryaev的新技術(shù)隨之在技術(shù)圈火了起來,激發(fā)了包括大谷在內(nèi)的更多技術(shù)人,修復(fù)珍貴的影像文獻。

除了上文提到的《開國大典》,在老片修復(fù)上,AI應(yīng)用于影視制作的新技術(shù)——“中影·神思”系統(tǒng)的開發(fā),能縮短修復(fù)電影所需時間的四分之三,成本可以減少一半,目前已成功應(yīng)用于《厲害了,我的國》《血色浪漫》《亮劍》等多部影視劇的圖像修復(fù)與增強當中。

IDG資本被投企業(yè)愛奇藝也推出了其自主研發(fā)的視頻增強技術(shù)Zoom AI,來為電影修復(fù)提出解決方案。這是業(yè)內(nèi)第一個利用較低成本、將深度學習技術(shù)應(yīng)用在視頻畫質(zhì)增強場景中的方案。

但不可否認的是,這種技術(shù)如果被有惡意的人使用,例如,可以用于制作“偽造品”并允許視頻中的身份盜用,也會導致巨大的社會問題。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 視頻
    +關(guān)注

    關(guān)注

    6

    文章

    1999

    瀏覽量

    74661
  • AI
    AI
    +關(guān)注

    關(guān)注

    90

    文章

    38241

    瀏覽量

    297171

原文標題:AI修復(fù)的真實影像,帶你瞬間穿越回100年前

文章出處:【微信號:idg_capital,微信公眾號:IDG資本】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    蔡司CIMT2025 | 新品天團首位成員ZEISS ScanBox 4系亮相,引領(lǐng)測量新境界 蔡司新品組團出道 你是否一直在尋覓

    ? 蔡司新品組團出道 ? 你是否一直在尋覓款 能提升生產(chǎn)效率、把控質(zhì)量的測量武器? 現(xiàn)在,它來了! 本次CIMT2025展會上 蔡司“新品天團”首位成員 “效率擔當” ZEISS ScanBox
    發(fā)表于 03-25 14:46 ?466次閱讀
    蔡司CIMT2025 | 新品天團首位成員ZEISS ScanBox 4系亮相,引領(lǐng)測量新境界    蔡司新品組團出道  你是否<b class='flag-5'>一直在</b>尋覓

    Banana Pi 發(fā)布 BPI-AI2N &amp; BPI-AI2N Carrier,助力 AI 計算與嵌入式開發(fā)

    和 Renesas一直致力于推動開源生態(tài)的發(fā)展,并積極合作打造高效、開放的計算平臺。BPI-AI2N & BPI-AI2N Carrier 的發(fā)布,不僅為開發(fā)者提供了強大的硬件支持,也將
    發(fā)表于 03-19 17:54

    LPS25HBTRIIC讀取數(shù)據(jù)一直遞減,不穩(wěn)定怎么解決?

    我用的是STM32H7讀取MKI-165V1的開發(fā)板的大氣壓的值,我設(shè)置輸出頻率為1,STM32間隔1s讀取次大氣壓數(shù)據(jù),未使用FIFO,得到的IIC大氣壓數(shù)據(jù)一直在減少,個小時
    發(fā)表于 03-10 07:00

    大模型的數(shù)學能力或許一直都在關(guān)鍵在于如何喚醒它

    追求人工智能極限的道路上,"更大即更強" 似乎已成為共識。特別是在數(shù)學推理這被視為 AI 終極挑戰(zhàn)的領(lǐng)域,業(yè)界普遍認為需要海量數(shù)據(jù)和復(fù)雜的強化學習才能獲得突破。 然而,來自上海交通
    的頭像 發(fā)表于 02-17 17:44 ?947次閱讀
    大模型的數(shù)學能力或許<b class='flag-5'>一直</b>都在關(guān)鍵在于如何喚醒它

    ADS1278上電后,SCLK沒給波型(一直是高電平),為什么DOUT會一直出來波形?

    ADS1278上電后,SCLK沒給波型(一直是高電平),為什么DOUT會一直出來波形?很不解。不是說DOUT只SCLK有波形輸入的時候才會輸出波的嗎
    發(fā)表于 02-14 06:22

    ADS801的輸出一直在跳變,輸入是電阻分壓的值,測量參考電壓基本上與數(shù)據(jù)手冊相同,有差值是什么原因?

    ADS801的輸出一直在跳變,輸入是電阻分壓的值,測量參考電壓基本上與數(shù)據(jù)手冊相同,有差值,請問是什么原因?
    發(fā)表于 02-12 08:40

    ADS8328 Manual Select不能切換到通道1,一直在采樣通道0,為什么?

    現(xiàn)在正在用ADS8328,讀寄存器及采樣數(shù)據(jù)都沒有問題,Auto Channel采樣正常,Manual Select不能切換到通道1,一直在采樣通道0
    發(fā)表于 02-12 08:20

    用示波器測量ADS801的12位數(shù)字量,有些位的輸出高低電平一直在跳,是什么原因?

    我用示波器測量ADS801的12位數(shù)字量,有些位的輸出高低電平一直在跳,不知道什么原因,我測了下參考電壓,基本上跟數(shù)據(jù)手冊上差不多,數(shù)據(jù)手冊上要求時鐘信號的上升和下降時間是2ns,我給的時鐘沒有達到這個要求,請問是不是這個原因?請教各位,謝謝!
    發(fā)表于 02-08 08:47

    ADS1198START=1命令發(fā)出之前,DADY一直是1,為什么?

    手冊上說DRDYSTART=1命令發(fā)出后且AD轉(zhuǎn)換結(jié)束之后會變?yōu)椋?,并過段時間之后會自動變?yōu)椋保易鰧嶒灥臅r候,轉(zhuǎn)換結(jié)束之后一直是0,不會變?yōu)椋?,實在想不明白是哪里出的問題。 另:
    發(fā)表于 02-05 06:13

    ADS1248讀出的AD值一直在跳變是什么原因?qū)е碌模?/a>

    最近在調(diào)ADS1248 讀取K型熱電偶的板子 寄存器都能配置, 就是讀取的AD值一直在調(diào) 而且調(diào)的范圍很大 不知道什么原因?還有 如何把AD值轉(zhuǎn)換成溫度值 有沒有什么計算公式啊?
    發(fā)表于 01-24 07:45

    ADS1298R正常模式后,使用固定信號源輸入時,接收到的數(shù)據(jù)一直在跳變,為什么?

    100mV左右,跟datasheet上說的差不多。 可是當我改為正常模式后,使用固定信號源輸入時,接收到的數(shù)據(jù)一直在跳變,跳變的幅度較大。 能否幫忙分析下,或者提點建設(shè)我需要從哪方面檢查? 另外誰有OK的用例的寄存器設(shè)置表
    發(fā)表于 01-22 06:18

    ADS1292上電后DRDY腳位一直在high上是怎么回事

    ADS1292, ADS1292R小弟接了ADS1292的電路,上電以後DRDY腳位一直維持high,是線路有問題嗎? 謝謝您的答覆 我還有個問題就是 當我上電以後(3.3V) 沒有任何程式
    發(fā)表于 01-20 08:06

    LDC1614EVM一直處于紅燈狀態(tài),為什么?

    LDC1614EVM一直處于紅燈狀態(tài),根據(jù)資料板子一直在自我測試,但是應(yīng)該自我測試完之后就可以使用了,一直處于自我測試階段,不能使用
    發(fā)表于 01-03 06:53

    ADS1216上電后采樣到的值一直在緩慢減小,為什么?

    我用的AIN0和AIN1差分輸入采樣,用恒壓源提供的采樣電壓,幾十毫伏的,PGA設(shè)置的64倍,上電后采樣到的值一直在緩慢減小,要經(jīng)過好幾個小時才能穩(wěn)定住,而且斷電之后和下次上電之間間隔的時間越長,上電時的采樣值與之后的穩(wěn)定值相差越大
    發(fā)表于 12-27 08:44

    dac8760一直沒輸出,而且ALARM引腳一直輸出高電平,是什么原因?

    最近,我和同學一直在調(diào)dac8760,但一直沒輸出,而且ALARM引腳一直輸出高電平。不知道是什么原因,求解答。謝謝
    發(fā)表于 12-27 07:06