MeetMo.io 提供的沉浸式技術(shù)幫助 Felix & Paul Studio 在 Meta 的 Horizon Worlds 以及 360 度 8K 分辨率球幕上直播“太空探索者：阿爾忒彌斯升空（Space Explorers: Artemis Ascending）”

案例簡介

MeetMo.io 想要通過創(chuàng)造獨(dú)一無二的沉浸式體驗(yàn)來慶祝阿爾忒彌斯計(jì)劃的發(fā)射。為此，他們開發(fā)了由 NVIDIA RTX A6000 和 A4000 驅(qū)動(dòng)的 Virtual Production Magic Box 來改進(jìn)直播流程，并將高清畫面?zhèn)鬏數(shù)礁鞯兀?/p>

• MeetMo.io 希望通過打造獨(dú)一無二的沉浸式體驗(yàn)來慶祝阿爾忒彌斯計(jì)劃的發(fā)射。

• 該團(tuán)隊(duì)希望向觀眾傳送高精度畫面，使觀眾仿佛置身于肯尼迪航天中心的發(fā)射臺(tái)上觀看發(fā)射。

• 他們需要同步多臺(tái)攝像機(jī)的拍攝畫面，確保其以極低的延遲來傳輸高質(zhì)量的畫面。

• MeetMo.io 開發(fā)了虛擬制作桌面（VPD），這臺(tái)邊緣計(jì)算機(jī)內(nèi)置支持超高分辨率的編碼器。

• VPD 由圖形性能可靠而強(qiáng)大的 RTX A6000 驅(qū)動(dòng)。

• 該團(tuán)隊(duì)在編/解碼器內(nèi)所使用的 RTX A4000 幫助他們快速編碼與傳輸 8K 視頻。

• MeetMo.io 還通過其云原生平臺(tái)實(shí)現(xiàn)高效的遠(yuǎn)程工作流程。

• 借助 RTX 顯卡，MeetMo.io 的團(tuán)隊(duì)能夠拼接最高每秒 60 幀的 8K、360 度視頻。

MeetMo.io 為世界各地的客戶提供其屢獲殊榮的技術(shù)。在與 Felix & Paul Studio 的合作中，MeetMo.io 為由 NASA 領(lǐng)導(dǎo)的人類探月太空飛行計(jì)劃——阿爾忒彌斯計(jì)劃的首次發(fā)射提供了一系列全新沉浸式技術(shù)。阿爾忒彌斯計(jì)劃的主要目標(biāo)是將人類送至月球及更遠(yuǎn)的地方。

Felix & Paul Studios 攜手 MeetMo.io 使用沉浸式技術(shù)為全球觀眾在分辨率高達(dá) 8K 的球幕上直播了首次發(fā)射現(xiàn)場，并將畫面同步傳送至 Meta Horizon Worlds 以及歐洲和亞洲的電信公司。

為了提供身臨其境的體驗(yàn)，F(xiàn)elix & Paul Studios 將觀眾“帶上了火箭發(fā)射臺(tái)”。該團(tuán)隊(duì)通過強(qiáng)大的工具和技術(shù)，為全球提供近乎實(shí)時(shí)的 8K 直播。

現(xiàn)在，觀眾能夠以 8K 的分辨率 360 度實(shí)時(shí)體驗(yàn)太空探索的標(biāo)志性建筑—— NASA 航天器裝配大樓的各個(gè)細(xì)節(jié)。

MeetMo 8K VPD 實(shí)時(shí)引擎支持的廣播指揮中心。

做好準(zhǔn)備

打造這種規(guī)模的獨(dú)特沉浸式體驗(yàn)通常需要大量的基礎(chǔ)設(shè)施和數(shù)月的準(zhǔn)備。但 MeetMo.io 希望縮短這個(gè)工作流，將其快速化和精簡化。通過實(shí)時(shí)拼接、編碼傳輸功能和多設(shè)備網(wǎng)絡(luò)訪問，團(tuán)隊(duì)想要在不影響正常廣播和制作標(biāo)準(zhǔn)的前提下，提供具有吸引力的內(nèi)容。

MeetMo.io 的任務(wù)是將視頻以多種傳播形式傳輸，包括完整的 360 度格式、180 度球幕格式等。MeetMo.io 首席執(zhí)行官 Michael Mansouri 表示：“在準(zhǔn)備這次直播時(shí)，我們遇到了一項(xiàng)獨(dú)特的挑戰(zhàn)——我們需要從多個(gè)攝像機(jī)角度拍攝畫面，同時(shí)還要提供 NASA 傳統(tǒng)的 16x9 直播畫面，并且所有這些畫面都是實(shí)時(shí)的。這意味著我們不僅要考慮到各種觀看方式之間，投影和傳輸格式的差異，還必須將它們快速、無縫地整合到直播車中?！?/span>

團(tuán)隊(duì)還需要建立 8K 直播攝像機(jī)與空間音頻系統(tǒng)之間的連接。一切都需要與大型球幕影院同步。觀眾還可以佩戴 VR 頭顯在 Meta Horizon Worlds 上觀看，也可以使用移動(dòng)設(shè)備和桌面設(shè)備在 Facebook 360 上觀看，還能通過合作電信公司的專用放送觀看。

“NVIDIA RTX A6000 和 A4000 GPU 所提供的可靠而強(qiáng)大的圖形性能使我們能夠拼接每秒 60 幀、8K 分辨率的 360 度內(nèi)容?！?/em>

Johan Romero
MeetMo.io 首席技術(shù)官

直播任務(wù)

MeetMo.io 開發(fā)了一項(xiàng)創(chuàng)新的直播解決方案：MoLink。這是一套由 NVIDIA RTX A4000 驅(qū)動(dòng)的強(qiáng)大 1U 機(jī)架式電信邊緣計(jì)算機(jī)。通過將虛擬世界和現(xiàn)實(shí)世界相連，MoLink 可以利用其 Metaverse Transmedia Encoder（MTE）在從手機(jī)到球幕等多臺(tái)設(shè)備上同步、低延遲地組播 8K 視頻。

借助 NVIDIA RTX 顯卡，該團(tuán)隊(duì)能夠輕松地以 60fps 拼接 360 度內(nèi)容，提供更具沉浸感的發(fā)射現(xiàn)場畫面。RTX A6000 使 MeetMo.io 能夠創(chuàng)建整套 VFX 實(shí)時(shí)工具來重置視頻并通過延遲視頻和音頻實(shí)現(xiàn)與傳統(tǒng) 16x9 格式的同步。團(tuán)隊(duì)在編/解碼器內(nèi)使用了 A4000 顯卡，依靠 A4000 處理器的強(qiáng)大性能及其緊湊的設(shè)計(jì)實(shí)現(xiàn)高速的 8K 視頻編碼及傳輸。

MeetMo.io 還通過其云原生平臺(tái)創(chuàng)建了效率驚人的遠(yuǎn)程工作流，能夠幫助實(shí)現(xiàn)更高的分辨率、更高的幀率與動(dòng)態(tài)范圍（HDR）、更寬的屏幕以及超低時(shí)延的雙向互動(dòng)。

Flightline Films 使用其 JLAIR 火箭跟蹤攝像機(jī)，從 23 英里的高空對(duì) NASA 的阿爾忒彌斯發(fā)射進(jìn)行了直播。

搭建未來沉浸式直播平臺(tái)

MeetMo.io 的方案并不是要顛覆傳統(tǒng)電影和廣播行業(yè)，而是通過利用先進(jìn)技術(shù)將傳統(tǒng)廣播與元宇宙連接起來，最終在兩個(gè)世界之間架起一座暢通無阻的橋梁，提升整個(gè)行業(yè)的水平。

NVIDIA RTX 驅(qū)動(dòng)的 VPD 將為整個(gè)行業(yè)的廣播公司與工作室?guī)砣碌墓δ芘c效率。專業(yè)人員可以使用 VPD 改進(jìn)沉浸式敘事和虛擬制作流程，其好處包括：

• 高達(dá) 8K 的高分辨率

• 每秒 60 至 120 幀的更高幀率

• 可將 8K 直播畫面直接導(dǎo)入到虛幻引擎和 Unity 等實(shí)時(shí)引擎

• 通過 RTMP 協(xié)議降低延遲

• 更高質(zhì)量的色彩二次采樣

• 縮放和重置，包括重構(gòu)、旋轉(zhuǎn)、畫中畫和放大/縮小

• 以及在 360 度投影內(nèi)添加圖片、文本和圖像

憑借這些技術(shù)，廣播公司可以將觀眾帶入到一個(gè)全新的、完全沉浸式的世界中，使觀眾享受到更高質(zhì)量的視覺效果。這不僅可以為觀眾提供交互式的內(nèi)容，還可以給他們帶來靈感，啟發(fā)他們自行制作出獨(dú)一無二的作品，比如游戲賽事或社交聚會(huì)的直播、為視頻會(huì)議制作的“好萊塢大片級(jí)”演示等。

MeetMo.io 與 Kandao 一同創(chuàng)建了先進(jìn)的 8K 直播流程，通過使用 SDI 實(shí)現(xiàn)專業(yè)級(jí)的視頻制作。

點(diǎn)擊“閱讀原文”，進(jìn)一步了解 NVIDIA 專業(yè)廣播解決方案。

掃描下方海報(bào)二維碼，觀看 NVIDIA 創(chuàng)始人兼 CEO 黃仁勛在 COMPUTEX 2023 的主題演講直播回放，主題演講中文字幕版已上線，了解 AI、圖形及其他領(lǐng)域的最新進(jìn)展！