?

新思科技一直致力于打造“人人都能懂”的行業(yè)科普視頻，傳播更多芯片相關(guān)小知識，解答各類科技小問題。每周3分鐘，多一些“芯”知識。

這一期，我們聊一聊VR、AR與MR的那些事兒。

VR、AR、MR，聽起來是不是感覺都差不多？

你是不是想說：“就是虛擬眼鏡那些東西唄?！?/p>

沒錯，你說對了…里面的一小部分。

近幾年“元宇宙”概念火熱，人類對虛擬世界的探索漸漸形成系統(tǒng)產(chǎn)業(yè)。甚至似乎無論什么行業(yè)什么公司，但凡和“虛擬”能沾上邊都自稱元宇宙公司。VR、AR、MR這幾個詞也隨著元宇宙的熱度，打著組合拳走進了我們的視野。

這三個也確實是虛擬現(xiàn)實產(chǎn)業(yè)的Key word。詳聊一下這三個詞，也能管中一窺目前增強與虛擬現(xiàn)實產(chǎn)業(yè)的情況。

VR（Virtual Reality），指虛擬現(xiàn)實。也就是創(chuàng)造一個完全虛擬的世界，用戶可以在其中進行體驗。通過設(shè)備模擬一個完全虛擬的數(shù)字世界，通過VR眼鏡和手柄等外設(shè)進入虛擬空間，能為用戶提供視覺、聽覺、觸覺等感官模擬體驗。對使用者而言，這是一種完全的沉浸式體驗。

AR（Augmented Reality），意為增強現(xiàn)實。也就是把虛擬的元素增加到現(xiàn)實世界的場景中，增加了用戶的現(xiàn)實體驗。通俗地說，AR=真實世界場景+虛擬物體信息。通過將計算機技術(shù)生成的虛擬文字、圖像等信息融合并疊加到真實世界的場景中并實現(xiàn)交互。

MR（Mixed Reality），稱為混合現(xiàn)實，是VR和AR的融合形態(tài)。能夠?qū)⒄鎸嵤澜绾吞摂M世界進行融合，產(chǎn)生新的可視化環(huán)境，是通過真實世界+虛擬世界+數(shù)字化信息的高度融合方式形成的一個無縫銜接的虛實交互的世界。

總結(jié)下來，三者關(guān)系非常微妙，都含有虛擬的部分。VR是全虛擬的數(shù)字世界；AR是半真半假，只是將虛擬的投射到現(xiàn)實中；MR則是將數(shù)字虛擬的內(nèi)容按照現(xiàn)實規(guī)律疊加在真實世界中，讓你真假難辨。

這些體驗是通過哪些技術(shù)得以實現(xiàn)的呢？

VR虛擬現(xiàn)實

VR的核心技術(shù)包括近眼顯示、感知交互、渲染處理、內(nèi)容制作。簡單地說，就是如何讓你沉浸在一個頭戴式的眼鏡里，眼鏡里需要一個響應(yīng)速度極快的顯示器（及配套的驅(qū)動芯片）。它的刷新率需要足夠高，避免使用者感到不適暈眩。

其中顯示器部分，已從AMOLED發(fā)展到Fast LCD，而后又升級為帶有Mini LED背光的Fast LCD。感知交互模塊，需要配以慣性傳感器、3D攝像頭等其他感官探測硬件，來實現(xiàn)語言交互、眼球追蹤、觸覺反饋、表情識別、腦電交互等功能。

渲染技術(shù)，也就是圖像處理，則需要GPU與算法配合來進行整個畫面的優(yōu)化處理。當然，圖形接口、渲染專用硬加速芯片、云端渲染、光場渲染、視網(wǎng)膜渲染等關(guān)鍵技術(shù)也需要進一步研發(fā)加強，來實現(xiàn)高畫質(zhì)和低延時。

AR增強現(xiàn)實

AR最核心的技術(shù)則是VPS（Visual Positioning System），視覺定位技術(shù)。學(xué)術(shù)上稱為“空間計算”，包括空間構(gòu)建和定位服務(wù)。其中地圖構(gòu)建技術(shù)有SLAM（即時定位與地圖構(gòu)建）、SFM（三維重建）等，目前SFM更為主流。

從概念上講，SFM是用多幅包含著視覺運動信息的二維圖像序列去估算三維結(jié)構(gòu)的技術(shù)。它屬于計算機視覺及可視化的研究范圍。

此外，AR眼鏡中，顯示技術(shù)是另一大核心，分為被動式微顯示技術(shù)，主動式微顯示技術(shù)以及掃描顯示技術(shù)。其中，被動式微顯示技術(shù)包括傳統(tǒng)的LCD以及DLP、LCOS等，它們在工作時需要使用RGB LED或者RGB激光器作為光源。主動式微顯示技術(shù)包括使用Micro OLED和Micro LED的顯示技術(shù)。掃描顯示技術(shù)（LBS）使用RGB激光器作為光源，搭配MEMS進行掃描成像。

MR混合現(xiàn)實

MR技術(shù)需要感知系統(tǒng)和顯示設(shè)備，其中感知系統(tǒng)中也需要和AR一樣的空間構(gòu)建和定位。此外，MR不僅需要圖像識別，還要將現(xiàn)實的東西虛擬化，即把二維圖像通過計算機形成三維的虛擬圖像，也就是3D建模。建模后才能把它們有機地融進真實世界的影像中。使用MR技術(shù)的顯示設(shè)備可以非常簡單，例如平板電腦和智能手機等。直接通過手機屏幕，就可以看到虛擬和現(xiàn)實的結(jié)合。當然了，底層的芯片技術(shù)不必多說，就是手機SoC芯片。

有點黑科技的意思了吧。這些技術(shù)如今發(fā)展得怎么樣了呢，我們什么時候才能大規(guī)模用上呢？

從市場規(guī)模來看，IDC數(shù)據(jù)顯示，2021年全球AR/VR市場總投資規(guī)模接近146.7億美元，并有望在2026年增加到747.3億美元，五年復(fù)合增長率將達38.5%。目前國內(nèi)虛擬現(xiàn)實產(chǎn)業(yè)的投融資關(guān)注度較高，投資并購事件頻發(fā)，國內(nèi)的資本熱度也將進一步推動國內(nèi)VR市場規(guī)模提升。

從產(chǎn)業(yè)發(fā)展來看，未來AR/VR將在垂直行業(yè)中快速滲透。目前，VR應(yīng)用場景以to-C（直接面對使用者）為主，聚焦于游戲、娛樂、治療等領(lǐng)域，目的是創(chuàng)造一個完全虛擬的世界。例如在游戲領(lǐng)域，VR技術(shù)可以模擬游戲設(shè)計中的環(huán)境、感知和自然技能，并在此基礎(chǔ)上形成立體的動態(tài)場景，讓玩家通過交互界面和VR可穿戴設(shè)備直接與游戲中的環(huán)境和角色進行交流，強化游戲的真實感。

與此同時，在B端（商業(yè)模式）對于VR+營銷、VR+文旅、VR+醫(yī)療培訓(xùn)、VR+工業(yè)制造等廣泛實踐也在陸續(xù)開展。從B端成效看，VR+營銷已成為近年的熱點，VR全景與房產(chǎn)家裝的營銷方式已經(jīng)有了非常多的成熟案例，同時短視頻、語音解說等功能也嵌入VR全景中。

AR目前則主要應(yīng)用于B端，涵蓋了工業(yè)、廣告營銷、制造業(yè)等諸多行業(yè)。以工業(yè)生產(chǎn)為例，AR的可視化能發(fā)揮重大作用，可極大提高生產(chǎn)效率。比如在操作繁雜的飛機制造領(lǐng)域，工作人員戴上AR眼鏡后，整個流程會直接投射到眼前，工作人員可以一邊對照著全息畫面的流程一邊工作，避免出錯。在一些復(fù)雜的工業(yè)設(shè)計生產(chǎn)中，通過AR技術(shù)，工程師把生產(chǎn)流程在真實世界中精確地展示出來，更能實時查看設(shè)計效果。

由于各行業(yè)應(yīng)用場景具有獨特性和應(yīng)用壁壘，相比于通用型、標準化產(chǎn)品，未來AR和VR仍會在垂直行業(yè)中快速滲透，以提供行業(yè)產(chǎn)品及行業(yè)解決方案。而MR技術(shù)由于其真實感強、互動性好等獨特的優(yōu)勢，并且可以與現(xiàn)實世界進行交互且產(chǎn)生新的可視化環(huán)境，能夠在多種不同的領(lǐng)域深入應(yīng)用，可以說比AR和VR的發(fā)展前景更廣闊。

隨著5G的高速率、廣連接和低時延直接提升了虛擬現(xiàn)實設(shè)備性能并改善了用戶體驗，客觀上進一步助推AR/VR/MR的大規(guī)模應(yīng)用。在云計算、大數(shù)據(jù)、物聯(lián)網(wǎng)、人工智能以及移動互聯(lián)網(wǎng)等技術(shù)的融合加持下，有望構(gòu)建互聯(lián)網(wǎng)下一站——空間互聯(lián)網(wǎng)。在經(jīng)歷了PC互聯(lián)網(wǎng)時代與移動互聯(lián)網(wǎng)時代后，人類將進入空間互聯(lián)網(wǎng)的時代。數(shù)字技術(shù)更不易察覺卻又無處不在，隨之而來的將是新的交互終端呈現(xiàn)方式。

空間計算將成為人類與周圍環(huán)境的計算設(shè)備進行交互的嶄新渠道，AR/VR/MR設(shè)備將取代電腦、手機成為空間互聯(lián)網(wǎng)的交互入口。數(shù)據(jù)資產(chǎn)將不再僅僅處于計算機、手機等固定設(shè)備中，而是占據(jù)了我們周圍的空間，交互無處不在。新思科技不單作為光學(xué)解決方案提供商，為AR/VR、移動設(shè)備、平板顯示等領(lǐng)域提供一流的光學(xué)設(shè)計工程服務(wù)；更作為數(shù)智時代的“根技術(shù)”提供者，新思科技將通過芯片自動化設(shè)計工具EDA、IP和軟件安全的整體解決方案，賦能所有的先進芯片，用領(lǐng)先科技助力未來空間互聯(lián)網(wǎng)的到來。

空間互聯(lián)網(wǎng)將會帶來全新3D化、游戲化等的交互體驗，甚至有機會重新奠定一個空間互聯(lián)網(wǎng)內(nèi)容生態(tài)的全新商業(yè)模式。

其實，在AR、VR和MR技術(shù)出現(xiàn)之前，我們早在電影層面有了藝術(shù)想象?！栋⒎策_》、《盜夢空間》、《頭號玩家》這些電影都向我們描述了虛擬與現(xiàn)實交織的世界。

《黑客帝國》就里有一句經(jīng)典發(fā)問“什么是真實？你又如何定義真實？”當?shù)讓蛹夹g(shù)不斷發(fā)展，我們該如何擁抱未來，這是未來世界等待著我們用科技來作答的發(fā)問。

?