這個(gè)視頻來(lái)自一位名叫“大谷Spitzer”的博主，據(jù)他所說(shuō)，接觸老片修復(fù)是一個(gè)偶然，整個(gè)項(xiàng)目也只花了7天時(shí)間就順利完成了。

先來(lái)一起看看這驚人的修復(fù)效果。

老視頻

修復(fù)后效果

這樣的畫(huà)面大大地滿足了網(wǎng)友們的好奇心。視頻一經(jīng)發(fā)布，在24小時(shí)內(nèi)就有了將近50萬(wàn)的點(diǎn)贊量，10萬(wàn)+次的轉(zhuǎn)發(fā)和接近3萬(wàn)的留言。修復(fù)后的視頻把當(dāng)時(shí)的北京城演繹得活靈活現(xiàn)，下邊的片段中，左下角小哥呆呆地看著鏡頭，連細(xì)微的表情都清晰可見(jiàn)，青澀中帶有一點(diǎn)可愛(ài)。想象一下這位表情憨厚的小哥來(lái)自一百年前，不禁讓人感慨萬(wàn)千。

怪不得網(wǎng)友們紛紛贊嘆。有網(wǎng)友表示，不僅整體氛圍沒(méi)話說(shuō)，連細(xì)節(jié)部分也分毫畢顯，“每個(gè)人臉上都是新奇又不敢接近的表情”。

甚至有網(wǎng)友留言表示，“博物館應(yīng)該收藏你的作品”！

博主在視頻最開(kāi)始就說(shuō)道，想用技術(shù)為社會(huì)做一些有意義的事情，懷著仰慕的心情，筆者聯(lián)系到了這位“大谷Spizer”，來(lái)看看他是怎么說(shuō)的吧~

7天完工，難在顯卡

整體滿意，顏色上還有不足

自稱將AI視為業(yè)余愛(ài)好的大谷如今身在紐約，他透露說(shuō)，其實(shí)這次接觸老片修復(fù)純屬偶然，在搜索其他資料時(shí)候，偶然間在YouTube看到了人民日?qǐng)?bào)上傳的一段老北京視頻，在視頻里，100年前的人們恰好也在看鏡頭、和看視頻的人形成了“對(duì)視”時(shí)，大谷十分有感觸：“有一種穿越時(shí)空的感覺(jué)”。在這基礎(chǔ)上，他自己又恰好了解相關(guān)技術(shù)，為何不將老片上色補(bǔ)幀，做成活靈活現(xiàn)的60幀，和大家分享呢？

100年前熟人見(jiàn)面打招呼的方式

具體到操作上，根據(jù)大谷介紹，可以大致分為補(bǔ)幀、擴(kuò)分辨率、上色三個(gè)環(huán)節(jié)，每個(gè)環(huán)節(jié)也都用了不同的工具，整體框架的流程則主要參考了Denis Shiryaev在社交媒體上分享的經(jīng)驗(yàn)貼。

大谷說(shuō)道，整個(gè)項(xiàng)目只用了7天時(shí)間，大部分都是硬性的時(shí)間消耗，比如補(bǔ)幀需要一到兩天，擴(kuò)分辨率至少一天，上色也需要花費(fèi)一天時(shí)間，再加上要做到4K60fps，渲染速度很慢。多方考量之下，他把人民日?qǐng)?bào)14分鐘的原片剪到了10分鐘。

相比而言，去年國(guó)慶164分鐘修復(fù)版《開(kāi)國(guó)大典》為人們還原了三次戰(zhàn)役勝利到開(kāi)國(guó)大典的歷史過(guò)程。除了借助AI，膠片的撕裂、劃痕等都是專業(yè)的修復(fù)師一幀一幀地修補(bǔ)?！靶迯?fù)過(guò)程中，我們70%的時(shí)間都在完成資料片鏡頭的修復(fù)工作，”負(fù)責(zé)該片修復(fù)工作的三維六度公司的首席技術(shù)官周蘇岳曾說(shuō)道。雖然修復(fù)時(shí)間只用了40天，但這卻是600人每天工作20小時(shí)的奮戰(zhàn)結(jié)果！

除了硬性的時(shí)間消耗，大谷還笑稱，最大的問(wèn)題就是自己筆記本電腦的顯卡不夠好，“要1070的顯卡才帶得動(dòng)，否則會(huì)out of memory”，迫不得已之下向女朋友求了助。

對(duì)于最后的結(jié)果，大谷表示：“還是比較滿意的”，不過(guò)在顏色上還存在可以改進(jìn)的地方。

在視頻中，相信大家也會(huì)看到時(shí)不時(shí)會(huì)出現(xiàn)顏色跳來(lái)跳去的情況，大谷表示，在補(bǔ)幀之前用工具把老電影中經(jīng)常出現(xiàn)的畫(huà)面閃爍去掉了，否則會(huì)更嚴(yán)重，整體的色彩上，AI的渲染效果也明顯偏淡。

除此之外，大谷這次利用的是國(guó)外的一套模型，顯然無(wú)法直接將其套用到100年前的中國(guó)影片修復(fù)上，在顏色上就無(wú)法做到歷史性的準(zhǔn)確，視頻中的上色都是AI學(xué)習(xí)的成果，雖然膚色大致還原了，但是在紅綠服裝等方面的真實(shí)性還有待商榷。

也正是考慮到這些不足，大谷對(duì)去年參與《開(kāi)國(guó)大典》修復(fù)的工作人員表達(dá)了敬意，“AI沒(méi)辦法做到藝術(shù)家那么準(zhǔn)確，尤其是在歷史方面，而《開(kāi)國(guó)大典》對(duì)歷史準(zhǔn)確性的要求更高”，隨后他也打趣地說(shuō)道，或許可以“讓AI看看清宮劇，提升一下準(zhǔn)確率”。

就像大谷在視頻開(kāi)頭所說(shuō)，他想用技術(shù)做一些對(duì)社會(huì)有意義的事，在這次視頻爆紅之后，他表現(xiàn)得相當(dāng)豁達(dá)，“太深刻的大意義倒也說(shuō)不上，主要是想借此讓人們對(duì)歷史有所反思?！辈簧倬W(wǎng)友指出，視頻中幾乎看不到女性，這正是歷史生動(dòng)性的體現(xiàn)，既有光鮮也有不足，讓大家意識(shí)到現(xiàn)在的生活是多么來(lái)之不易。

同時(shí)，作為老北京人，大谷也想通過(guò)視頻分享他的切身感受，讓更多人看到一百年前的民俗，“尤其是上了色幀數(shù)提高之后，感覺(jué)確實(shí)不一樣，也感慨這一百年的變化”。

對(duì)于目前收到得反饋，大谷表示“完全沒(méi)想到”，他看了很多評(píng)論，也受感觸于一些留言，還有人私信向他表示，給太姥姥看后，也很懷念那個(gè)年代。

大谷透露道，這其實(shí)是他第一次嘗試做視頻修復(fù)，后續(xù)或許會(huì)出一期視頻介紹一下具體的操作。對(duì)于后續(xù)的視頻更新計(jì)劃，他想要介紹一下國(guó)內(nèi)已經(jīng)成熟的語(yǔ)音修復(fù)技術(shù)。

AI助力，老片修復(fù)一直在路上

對(duì)于這次用到的技術(shù)，大谷表示，上色主要還是應(yīng)用在黑白照片和電影上，補(bǔ)幀技術(shù)就可以遍地開(kāi)花了，比如修復(fù)像素動(dòng)畫(huà)的跳幀問(wèn)題，或者在動(dòng)畫(huà)領(lǐng)域加以應(yīng)用，因?yàn)閯?dòng)畫(huà)很多是12幀/秒，甚至6幀/秒，補(bǔ)幀之后效果很好，也終于可以看更流暢的EVA了。

作為一名獨(dú)立游戲開(kāi)發(fā)者，大谷透露他因?yàn)樽鲇螒蜷_(kāi)發(fā)接觸到AI，起初想要了解AI能否為他節(jié)省時(shí)間，后來(lái)發(fā)現(xiàn)AI能做的不止這些，在社會(huì)公益上也有不少應(yīng)用，比如這次的老片修復(fù)。

正如大谷所說(shuō)，這次的視頻修復(fù)技術(shù)管線參考自Denis Shiryae的影像修復(fù)教程，針對(duì)Denis的歐美老片修復(fù)，大谷也做過(guò)漢化視頻進(jìn)行了專門(mén)的介紹。

【AI高清修復(fù)】1906大地震前的舊金山

視頻鏈接：

https://www.bilibili.com/video/BV1Uf4y1m72n

Denis Shiryaev通過(guò)神經(jīng)網(wǎng)絡(luò)修復(fù)老視頻的內(nèi)容今年在油管爆紅了一陣子，他使用Topaz Labs的Gigapixel AI和DAIN圖像編輯應(yīng)用程序?qū)?9世紀(jì)的膠片縮放到4K分辨率，不僅將素材增加到4K，還將幀率提高到每秒60幀。

Shiryaev最火的作品是用Gigapixel AI將1896年拍攝的50秒無(wú)聲短片《火車進(jìn)站》(the Arrival of a Train at La Ciotat Station)做成了4K格式，把模糊的原片做成了高清畫(huà)質(zhì)，完全符合當(dāng)下的高清視頻標(biāo)準(zhǔn)。

盡管存在一些缺陷，如圖像會(huì)出現(xiàn)跳躍或某些細(xì)節(jié)依舊模糊，但已經(jīng)很棒了！

Gigapixel AI軟件使用一種專有的插值算法來(lái)分析圖像，它可以使圖像更清晰——甚至在放大了600%之后。

再來(lái)說(shuō)說(shuō)DAIN(深度感知視頻幀插值)，它可以將幀想象并插入現(xiàn)有視頻剪輯的關(guān)鍵幀之間。換句話說(shuō)，DAIN首先分析并映射視頻片段，然后插入在現(xiàn)有圖像之間生成填充圖像。

為了在這段1896年的視頻中達(dá)到同樣的效果，Shiryaev添加了足夠多的圖像來(lái)將速度提高到60幀每秒。因此，DAIN自動(dòng)生成，然后在最初記錄的24張圖像之外，每秒添加36張額外的圖像。

Shiryaev的“火車”的視頻修復(fù)版本看起來(lái)像是一部使用智能手機(jī)或GoPro拍攝的最新電影。與原始視頻相比，效果非常驚人，尤其是在新版本中獲得了流暢性。列車上的陽(yáng)光反射和月臺(tái)上的女士珠寶都被記錄的很完整，也許是最顯著的改進(jìn)之一。

Shiryaev也用神經(jīng)網(wǎng)絡(luò)對(duì)這一修復(fù)視頻進(jìn)行了著色：從一堆彩色照片開(kāi)始，將它們轉(zhuǎn)換為黑白，然后訓(xùn)練神經(jīng)網(wǎng)絡(luò)以重建彩色原稿。

修復(fù)后的視頻傳送門(mén)：

https://youtu.be/EqbOhqXHL7E

Shiryaev的新技術(shù)隨之在技術(shù)圈火了起來(lái)，激發(fā)了包括大谷在內(nèi)的更多技術(shù)人，修復(fù)珍貴的影像文獻(xiàn)。

除了上文提到的《開(kāi)國(guó)大典》，在老片修復(fù)上，AI應(yīng)用于影視制作的新技術(shù)——“中影·神思”系統(tǒng)的開(kāi)發(fā)，能縮短修復(fù)電影所需時(shí)間的四分之三，成本可以減少一半，目前已成功應(yīng)用于《厲害了，我的國(guó)》《血色浪漫》《亮劍》等多部影視劇的圖像修復(fù)與增強(qiáng)當(dāng)中。

IDG資本被投企業(yè)愛(ài)奇藝也推出了其自主研發(fā)的視頻增強(qiáng)技術(shù)Zoom AI，來(lái)為電影修復(fù)提出解決方案。這是業(yè)內(nèi)第一個(gè)利用較低成本、將深度學(xué)習(xí)技術(shù)應(yīng)用在視頻畫(huà)質(zhì)增強(qiáng)場(chǎng)景中的方案。

但不可否認(rèn)的是，這種技術(shù)如果被有惡意的人使用，例如，可以用于制作“偽造品”并允許視頻中的身份盜用，也會(huì)導(dǎo)致巨大的社會(huì)問(wèn)題。