移動(dòng)體驗(yàn)發(fā)展到今天,不滿足于移動(dòng)設(shè)備帶來的娛樂需求,在永無止境的探索中,我們更加渴望參與其中。我們也曾身臨其境體驗(yàn)過AR(增強(qiáng)現(xiàn)實(shí))和VR(虛擬現(xiàn)實(shí)),但是你知道這些夢(mèng)幻級(jí)的沉浸式體驗(yàn)都是怎么做到的嗎?
實(shí)現(xiàn)非凡沉浸式體驗(yàn)需同時(shí)聚焦以下三大維度:
首先是視覺上的考驗(yàn),由于 VR 眼鏡屏幕與我們的眼睛距離非常近,因此 VR 的視覺品質(zhì)需要屏幕像素能夠達(dá)到與真實(shí)世界無限接近的程度,從而做到“以假亂真”的真實(shí)感。高分辨率的屏幕同時(shí)也去除了“紗窗效應(yīng)”。
人類通過雙眼以 3D 形態(tài)觀察世界,這就需要立體顯示器為場(chǎng)景中的物體顯示適當(dāng)?shù)木吧?,從而?shí)現(xiàn)3D效果。人眼擁有接近 180° 的視場(chǎng)角(field of view,簡(jiǎn)稱:FOV),而能清晰成像的面積也有將近120°,因此 VR 設(shè)備的 FOV 視角越接近這一數(shù)值,越能提供沉浸式的體驗(yàn)。
視覺上的考驗(yàn)還遠(yuǎn)不止如此,更加困難的是從人體運(yùn)動(dòng)到顯示屏刷新之間的延時(shí)問題,也就是 MTP(motion to photon,簡(jiǎn)稱:MTP)延時(shí)。通過實(shí)驗(yàn),MTP 延時(shí)超過 20ms 將使沉浸式體驗(yàn)顯著下降,同時(shí)用戶也會(huì)產(chǎn)生眩暈感。此外,顯示屏的刷新頻率越高,所要求的 MTP 延時(shí)越低,比如一塊 60Hz 的屏幕的合理延時(shí)需少于 17ms,而一塊 90Hz 的屏幕則需低于 11ms。
*紗窗效應(yīng)(screen door effect):即當(dāng)像素密度不足時(shí)畫面在人眼中產(chǎn)生虛影的現(xiàn)象,就像通過紗窗看外面的世界。
其次是聽覺上的配合,為了使視覺與聽覺得到完全同步,我們需要高分辨率音頻和3D環(huán)繞聲。高保真的音頻可以在采樣頻率和采樣位數(shù)上與人類聽力相匹配。
除此之外,因?yàn)槲覀兲幱谌S空間當(dāng)中,聲音是3D形態(tài)的。同樣在VR場(chǎng)景中,3D音頻也必不可少,逼真的3D定位音頻可以在頭部轉(zhuǎn)動(dòng)時(shí)動(dòng)態(tài)調(diào)整3D環(huán)繞聲。這就意味著我們可以在虛擬現(xiàn)實(shí)環(huán)境中,通過聲音來辨別聲源方向和距離,做到與真實(shí)生活別無二致。
最后是交互的挑戰(zhàn),直觀交互實(shí)際上是人類的第二本能,沒有什么比轉(zhuǎn)動(dòng)頭部環(huán)顧四周更自然的方式了。而驍龍移動(dòng)平臺(tái)中的 Hexagon DSP 運(yùn)行的視覺慣性測(cè)距算法,能夠計(jì)算出我們?cè)谔摂M或現(xiàn)實(shí)世界中的位置,并提供一個(gè)擁有六自由度(6-DOF)的頭部姿勢(shì)。依賴于認(rèn)知技術(shù),我們還可以使用手勢(shì)或語音,在圖形界面進(jìn)行控制。
*六自由度(6-DOF)精準(zhǔn)運(yùn)動(dòng)跟蹤不僅可以實(shí)現(xiàn)上下左右的基本模擬,還可以在不斷變化的虛擬現(xiàn)實(shí)環(huán)境中,實(shí)現(xiàn)前進(jìn)和后退。
受益于近年來的積極發(fā)展,虛擬現(xiàn)實(shí)已經(jīng)擺脫了早期笨重的有線頭戴式顯示器與控制器。驍龍移動(dòng)平臺(tái)采用系統(tǒng)性解決方案和基于 SoC 的定制設(shè)計(jì)專業(yè)引擎,提供經(jīng)過終端到終端優(yōu)化后的高效異構(gòu)運(yùn)算解決方案,將 VR 變成現(xiàn)實(shí)。
電子發(fā)燒友App






評(píng)論