元宇宙作為當(dāng)前熱門話題之一,受到了業(yè)界廣泛地關(guān)注,不少企業(yè)紛紛開始依托現(xiàn)有業(yè)務(wù)與技術(shù)能力布局元宇宙領(lǐng)域,迎接這個(gè)新的風(fēng)口。本次,我們很榮幸地邀請(qǐng)到了 ZEGO 即構(gòu)科技 解決方案開發(fā)專家 許明龍接受采訪,一起聊一聊 ZEGO 即構(gòu)科技在推進(jìn)元宇宙建設(shè)過程中的策略和布局,以及在元宇宙引擎構(gòu)建和實(shí)時(shí)互動(dòng)RTI領(lǐng)域的探索與成果。
許明龍,ZEGO即構(gòu)科技 解決方案開發(fā)專家
主要負(fù)責(zé)泛娛樂場(chǎng)景下的元宇宙解決方案的開發(fā)和落地,包括 Avatar 虛擬形象以及虛擬場(chǎng)景在各類泛娛樂 App 內(nèi)的集成開發(fā)、性能優(yōu)化、多平臺(tái)兼容優(yōu)化支持等。在虛擬世界結(jié)合 RTC 以及虛擬場(chǎng)景環(huán)境音在各個(gè)平臺(tái)的落地上積累了豐富的經(jīng)驗(yàn)。
Dialogue with Xu Minglong
LiveVideoStack:許老師好,很高興能邀請(qǐng)您接受采訪。先跟LiveVideoStack的讀者朋友們簡(jiǎn)單介紹下自己吧。可以說說目前重點(diǎn)關(guān)注的一些技術(shù)、工作內(nèi)容等等。
許明龍:大家好,我是 ZEGO 即構(gòu)科技的解決方案開發(fā)工程師許明龍。在公司主要負(fù)責(zé) RTC SDK 相關(guān)的研發(fā)工作,給公司多家頭部客戶做過解決方案,也針對(duì)不同的客戶需求開發(fā)過很多定制方案,涉獵教育、娛樂、游戲、金融等多種場(chǎng)景。參與過虛擬世界相關(guān)能力底層的開發(fā),客戶對(duì)接集成落地經(jīng)驗(yàn)豐富。目前在開發(fā) Unity 相關(guān)的元宇宙能力、以及小游戲相關(guān)的平臺(tái)建設(shè)。
LiveVideoStack:當(dāng)前許多企業(yè)紛紛開始布局元宇宙,但構(gòu)建元宇宙從技術(shù)實(shí)現(xiàn)到場(chǎng)景應(yīng)用是一項(xiàng)極為復(fù)雜的工程。在您看來能夠快速入局,迎接元宇宙這個(gè)風(fēng)口的關(guān)鍵路徑和可能在哪里?
許明龍:當(dāng)下的元宇宙距離人們想象的去中心化、用戶生產(chǎn)并擁有數(shù)字資產(chǎn)以及能夠?qū)崿F(xiàn)跨平臺(tái)玩耍的“終極形態(tài)”還有相當(dāng)長(zhǎng)的路要走。受困于硬件、技術(shù)的壁壘,元宇宙初期應(yīng)用方向?qū)⒁苑?wù)于普羅大眾的輕度娛樂為主,而非面向核心玩家的硬核內(nèi)容。所以在元宇宙推進(jìn)的過程中,不應(yīng)急功近利,而是將元宇宙拆解,徐徐圖之。
泛娛樂社交玩家能否靠元宇宙突圍,其核心并不在于“元宇宙”三個(gè)字對(duì)自身的加持如何,而在于是否能搭建出擊中用戶的娛樂化/功能化場(chǎng)景,一個(gè)成熟的元宇宙場(chǎng)景,并非簡(jiǎn)單地將表現(xiàn)形式由二維切換至三維,光影、場(chǎng)景規(guī)劃乃至聲場(chǎng)的遠(yuǎn)近都將時(shí)刻影響著場(chǎng)景氛圍。這意味著,企業(yè)無法簡(jiǎn)單地套用過去的產(chǎn)品設(shè)計(jì)方案來搭建場(chǎng)景,而是需要相應(yīng)的元宇宙引擎來處理涉及技術(shù)底層,細(xì)密繁雜的問題,元宇宙引擎就像是工具箱,讓開發(fā)者快速進(jìn)入核心工作,不必由發(fā)明工具開始從零起步,節(jié)省了寶貴的時(shí)間及金錢人力成本。發(fā)掘這樣的“元宇宙引擎”可能就是迎接元宇宙這個(gè)風(fēng)口的關(guān)鍵路徑。
“元宇宙智能互動(dòng)引擎”
LiveVideoStack:就在前不久,即構(gòu)科技正式對(duì)外發(fā)布了“元宇宙智能互動(dòng)引擎”,能否為我們具體介紹下它是什么?
許明龍:“即構(gòu)元宇宙智能互動(dòng)引擎”是一站式的元宇宙搭建平臺(tái)化服務(wù),即構(gòu)將提供有針對(duì)性的產(chǎn)品、工具和服務(wù),滿足企業(yè)不同的搭建需求,幫助企業(yè)低門檻快速打造元宇宙場(chǎng)景玩法。我們會(huì)提供豐富的素材庫,同時(shí)連接國(guó)內(nèi)數(shù)家 top 美術(shù)公司,打造開放的內(nèi)容生態(tài),滿足開發(fā)者對(duì)多元素材內(nèi)容以及高定制的需求。助力開發(fā)者低門檻快速打造元宇宙基礎(chǔ)設(shè)施,整合強(qiáng)大的音視頻能力衍生多元玩法,助力企業(yè)快速搭建元宇宙場(chǎng)景。
LiveVideoStack:為什么要打造元宇宙智能互動(dòng)引擎,有哪些實(shí)際價(jià)值?
許明龍:即構(gòu)科技打造“元宇宙智能互動(dòng)引擎”秉持的初衷是要成為其中的技術(shù)實(shí)干家,讓更多的行業(yè)先行者更快更簡(jiǎn)單地打造元宇宙場(chǎng)景,協(xié)助他們?nèi)ネ诰蛟钪嫖磥聿豢晒懒康膶?shí)際價(jià)值。
1、ZEGO Avatar 助力與幫助開發(fā)者和個(gè)人打造極具個(gè)性化的虛擬化身。Avatar,即構(gòu)虛擬人,通過素材、風(fēng)格的多元化的形象,實(shí)現(xiàn)栩栩如生的虛擬人,用戶可以構(gòu)建自己的虛擬形象,企業(yè)可以打造IP類數(shù)字資產(chǎn),通過強(qiáng)大的AI驅(qū)動(dòng)能力,僅需一臺(tái)千元機(jī)即可流暢實(shí)現(xiàn)極低延遲表情隨動(dòng)或肢體隨動(dòng)。
2、核心產(chǎn)品即構(gòu)虛擬世界,ZEGO Metaworld。提供了豐富且強(qiáng)大的組件庫,包括可交互的桌椅,聊天氣泡,粒子特效,大到虛擬語聊,虛擬換裝,當(dāng)前的超極屏就是 metaworld 的核心組件之一,通過即構(gòu)的暢直播方案為大家?guī)淼脱舆t的直播體驗(yàn)。
3、場(chǎng)景化的 RTC 能力。包括低延遲音視頻、直播、3D 音效、范圍語音,在開放世界中提供更加沉浸式的語音視頻體驗(yàn)。
4、多元化內(nèi)容。即構(gòu)沉淀了大量多元化能力和內(nèi)容,包括自研的白板、屏幕共享、文件分享,以及強(qiáng)大的內(nèi)容生態(tài):百萬級(jí)別的音樂版權(quán),上千部電影版權(quán),多種類型的優(yōu)質(zhì)小游戲,通過這些能力和內(nèi)容,可以輕松構(gòu)建不同類型的業(yè)務(wù)場(chǎng)景。
LiveVideoStack:即構(gòu)科技這么多年來一直在深耕探索音視頻通信、實(shí)時(shí)互動(dòng),音視頻處理、AI 算法等多方面的技術(shù)與能力。在此次構(gòu)建元宇宙智能互動(dòng)引擎的過程中,這些積累提供了哪些助力?我們又遇到了哪些難點(diǎn)與挑戰(zhàn),是如何克服的?
許明龍:元宇宙概念的出圈本身代表著各行業(yè)技術(shù)儲(chǔ)備到了一定規(guī)模,足夠支撐行業(yè)去想象未來的虛擬空間會(huì)如何呈現(xiàn)。電子游戲幾十年的發(fā)展摸清了 3D 空間打造、物理交互反饋以及如何帶給人更強(qiáng)的沉浸感。同時(shí)線上社交領(lǐng)域的 RTC 技術(shù)足夠支撐更加高質(zhì)量的音視頻傳輸、在實(shí)時(shí)的場(chǎng)景下去做到接近現(xiàn)實(shí)世界的視聽體驗(yàn)效果。
元宇宙的核心元素可以分為:身份、關(guān)系、沉浸感、低延遲、多元化、經(jīng)濟(jì)體系,事實(shí)上,其中核心元素和即構(gòu)的愿景“共建更好的實(shí)時(shí)互動(dòng)世界“不謀而合。元宇宙的興起,也正好成為了即構(gòu)的一場(chǎng)技術(shù)能力大考。
從 2015 年開始,借著連麥、直播、音視頻通話的能力,切入到實(shí)時(shí)互動(dòng)賽道。到 2019 年之后,我們注意到人工智能技術(shù)工程化逐步成熟并在眾多場(chǎng)景中落地開花,語音視頻的前后處理算法和能力也得到了廣度與深度兼具的發(fā)展。與此同時(shí),數(shù)字人、虛擬客服這類內(nèi)容的呈現(xiàn),包括網(wǎng)友們熟知的二次元歌姬演唱會(huì),多年來仍以離線生產(chǎn)的方式在行進(jìn),以實(shí)時(shí)互動(dòng)方式實(shí)現(xiàn)的案例偏少。能否給用戶帶來更多元化的內(nèi)容和玩法,增強(qiáng)線上的實(shí)時(shí)互動(dòng),多做一些可玩性更強(qiáng)的輸出?即構(gòu)開始投入大量資源和人力,專門研究 AI、音效處理、視覺處理、大規(guī)模線上人機(jī)交互和數(shù)據(jù)同步等多種算法和技術(shù),尋求線上互動(dòng)的能力突破。2021 年初,元宇宙概念興起,這與我們正在做的事情恰好一致,前期牢固的技術(shù)積累也為我們迅速切入元宇宙賽道提供了極大助力。
實(shí)時(shí)互動(dòng)RTI(Real-Time Interaction)
LiveVideoStack:今天,基于互聯(lián)網(wǎng)的線上交流互動(dòng),已經(jīng)不僅限于語音視頻這種你一句我一句的對(duì)話式通訊體驗(yàn)。從“線上交流”到“共享時(shí)空”已經(jīng)成為當(dāng)前互聯(lián)網(wǎng)演進(jìn)升級(jí)的方向。我們發(fā)現(xiàn)即構(gòu)強(qiáng)調(diào)的實(shí)時(shí)互動(dòng) RTI,與這個(gè)趨勢(shì)不謀而合,可以給我們介紹下即構(gòu)實(shí)時(shí)互動(dòng)RTI的內(nèi)涵么?
許明龍:隨著能力的拓新與服務(wù)的進(jìn)步,我們意識(shí)到即時(shí)通訊 RTC 已經(jīng)無法概括所有的線上交流。今天我們提出以實(shí)時(shí)互動(dòng)RTI(Real-Time Interaction)來總結(jié)概括 ZEGO 的能力,這并非是對(duì)未來的描繪,而是對(duì)當(dāng)下現(xiàn)實(shí)的陳述。
10月28日,即構(gòu)科技的 Express SDK3.0 全面上線,基于 RTI,我們發(fā)布了多項(xiàng)能力分別對(duì)應(yīng)智能逼真的畫質(zhì)「Intelligence」、身臨其境的音質(zhì)「Immersion」以及無限互動(dòng)的玩法「Infinity」,用可靠的技術(shù)實(shí)力為 ZEGO 實(shí)時(shí)互動(dòng) RTI 打上了生動(dòng)的注解。

多人狀態(tài)實(shí)時(shí)同步&大規(guī)模連麥為元宇宙空間內(nèi)的大規(guī)模用戶互動(dòng)提供了堅(jiān)實(shí)的基礎(chǔ),空間音頻能在虛擬空間中還原現(xiàn)實(shí)世界的聲音反饋。移動(dòng)端實(shí)時(shí)超分借助 AI 算法讓畫質(zhì)高清的同時(shí),能極大地控制傳輸成本。場(chǎng)景化降噪讓突發(fā)性噪聲消弭殆盡,為用戶帶來沉浸式的音質(zhì)體驗(yàn)……
實(shí)時(shí)互動(dòng)RTI(Real-time Interaction)即代表 ZEGO 能力的總和,同時(shí)也昭示著未來鉆研的方向:相較于RTC,并非以信息交互為唯一目標(biāo),而是通過數(shù)字化的方式,讓人與人共享時(shí)空,用可視化服務(wù)體系保障更好的互動(dòng)體驗(yàn),在高效準(zhǔn)確的基礎(chǔ)之上,滿足精神需求。
技術(shù)與需求在互相牽扯中不斷前進(jìn),作為數(shù)字化時(shí)代的賣水人,我們將不斷鉆研,力求為所有前行者提供更強(qiáng)大便捷的助力。ZEGO 所期望的,是用實(shí)時(shí)互動(dòng)技術(shù)與所有人共建讓工作生活更加輕松有趣的世界。
【相關(guān)釋義補(bǔ)充】:
RTI(Real-Time Interaction)代表一切為實(shí)現(xiàn)媲美甚至超越現(xiàn)實(shí)的實(shí)時(shí)互動(dòng)場(chǎng)景下所需要用到的所有產(chǎn)品和技術(shù)組合,除了核心的 RTC、IM、直播之外,還包括 Avatar、Al 視覺、狀態(tài)同步等等,相較于 RTC 更強(qiáng)調(diào)互動(dòng),不以信息的交換為唯一目標(biāo),旨在以數(shù)字化方式,創(chuàng)造用戶所需的共享時(shí)空,滿足其精神需求,并輔以配套的可視化服務(wù)體系保障更好的互動(dòng)。
LiveVideoStack:對(duì)于真正意義上的“元宇宙”,目前我們所能看到的可能只是冰山一角。能否總結(jié)和展望下元宇宙應(yīng)用或產(chǎn)品當(dāng)前所面臨的一些困境和挑戰(zhàn),以及未來的一些可能性?
許明龍:隨著元宇宙產(chǎn)業(yè)走入大眾視野,相應(yīng)的“承建”需求亦將激增,畢竟元宇宙并非能夠簡(jiǎn)單復(fù)刻的商業(yè)模式,而是涵蓋眾多前沿技術(shù)的集合。這意味著,工業(yè)化很可能將成為這場(chǎng)科技革命的必經(jīng)階段,而即構(gòu)這類的玩家,正扮演“流水線”的角色,為元宇宙而筑基。
LiveVideoStack:最后,接下來您也會(huì)參與今年LiveVideoStackCon 2022北京站大會(huì),能否在這里先劇透下,您會(huì)在現(xiàn)場(chǎng)分享哪些精彩內(nèi)容?
許明龍:元宇宙作為當(dāng)前熱門話題,引發(fā)各廠商紛紛布局,實(shí)時(shí)互動(dòng)作為搭建元宇宙場(chǎng)景的底層技術(shù)分支,是不可或缺的關(guān)鍵技術(shù),如何在短時(shí)間內(nèi)高效、迅速的獲取實(shí)時(shí)互動(dòng) RTI 技術(shù)能力,是占領(lǐng)市場(chǎng)的關(guān)鍵動(dòng)作之一,這次分享我會(huì)在現(xiàn)場(chǎng)分享 ZEGO 即構(gòu)科技在實(shí)時(shí)互動(dòng) RTI 領(lǐng)域的最新研發(fā)成果,再結(jié)合具體實(shí)踐案例,聊聊包括虛擬人、元宇宙場(chǎng)景狀態(tài)同步、大規(guī)模連麥等熱門技術(shù)。
LiveVideoStack:感謝,期待接下來您在北京站大會(huì)現(xiàn)場(chǎng)的精彩分享。
編輯:黃飛
?
電子發(fā)燒友App


























評(píng)論