日前，Varjo公布了自家AR/VR雲端協作平台Varjo Reality Cloud，該平台的特點是基於Varjo XR-3頭顯，利用LiDAR傳感器即時掃描物理環境，並將掃描到的3D環境數據在雲端共享，允許其他人透過2D器材或AR/VR頭顯遠端進入你所在的空間。其套用場景包括：社交、遠端辦公、工廠等等。
現有跨平台AR/VR遠端協同平台有許多，比如微軟Mesh、NVIDIA Omniverse等等。相比之下，Varjo Reality Cloud稱其特點是基於「人眼分辨率」AR/VR頭顯，支持超高畫質VR顯示和AR透視效果，而且采用低碼率影片串流演算法，即時渲染的3D場景比預先渲染的metaverse速度更快、效果更自然，直接用XR-3頭顯一邊掃描就能一邊共享3D場景。
也就是說，在共享3D場景過程中，LiDAR傳感器也在即時動態更新場景變化，參與者可以看到這個空間中人的移動或產品的變化等等。另一方面，透過XR-3的雙1200萬像素透視網絡攝影機，你可以清晰看到周圍的空間和「虛擬傳送」到這個空間中的其他人。
那麽，Varjo Reality Cloud實際效果如何呢？近期，外媒Road to VR的記者Ben Lang在矽谷一場會議中，曾在XR-3中預覽用Varjo Reality Cloud生成3D虛擬場景的效果，他表示：這是一個具有體積的虛擬空間，其中的人和場景都是由彩色的點雲數據組成的，不過實際效果看起來不如Varjo以前展示的攝影測量demo效果好。
值得註意的是，Lang所體驗的內容是預先錄制好的VR影片，並不是即時生成的畫面，因此無法體現實際套用的延遲。不過，在體驗過程中，Varjo分別展示了3D場景掃描和共享的效果，以及在AR透視中預覽其他人被「傳送」到你周圍的效果。看起來，Varjo Reality Cloud的跨平台「傳送」效果依然需要某種3D掃描/攝影測量方案，而不是用虛擬形象來代表被傳送的人。
Lang表示：Varjo Reality Cloud展示了一個立體空間，而不是單純的全景影片，我可以在空間中移動，還可以看到3D動態掃描的立體人像。不過，影像逼真程度還不夠完美，會存在像素缺失，邊界不清晰等問題。
他認為：短期內，Varjo Reality Cloud可能無法達到預先錄好的攝影測量影片的效果。不過Varjo表示：現有的技術依然在概念驗證階段，未來還將繼續提升畫面逼真度。
另外，Varjo Reality Cloud還將實作3D場景在雲端的即時共享，將3D場景串流到雲端，讓所有參與者看到同步的畫面。而這為雲端計算量，以及傳輸速度、延遲等方面帶來極大挑戰。為此，Varjo研發了一種名為「foveated compression」的低碼率傳輸演算法，每秒傳輸速度只需達到幾百萬字節。據猜測，該演算法可能基於Varjo的註視點渲染功能，以高畫質分辨率渲染使用者註視點區域，而余光則可以降低分辨率/碼率。
除了XR-3外，其他人可以使用智能電話、PC、平板電腦或其他VR頭顯來使用Reality Cloud平台，加入3D會議場景。
實際上，在正式釋出Varjo Reality Cloud之前，Varjo曾表示：這可能是我們有史以來最重磅的釋出。但它真的有那麽神奇嗎？
Lang認為，僅對於虛擬會議/協同場景，即時3D掃描方案看不到太大優勢，除非會議場景需要精準的3D呈現。另外，即使參與者可以看到主持人周圍的3D空間，但他們並不能與之互動，那麽重現3D場景的意義又是什麽？的確，能夠即時同步逼真的3D場景看起來令人驚奇，但其真正的價值還有待思考。
對此，Varjo指出了一個理論上的套用場景：工廠車間的傳送帶需要檢修時，可以透過Varjo Reality Cloud平台來對接遠端技術人員。比如，一個人可以戴上XR-3頭顯即時掃描工廠內部，並邀請其他人進入掃描後的3D場景，共同分析傳送帶的問題。
不過，Lang認為在工廠中使用高端PC VR比較麻煩，硬件笨重且需要連線線纜，因此不如直接用手機錄影片那麽實用。
除此之外，Varjo認為Reality Cloud平台未來還可以用於日常生活，比如：模擬物理模擬的metaverse。當然，這個概念在近幾年常常被人提起，不過實際套用卻並不容易。
總之，Lang認為自己並未看到Varjo Reality Cloud所探索的方向有哪些革新之處，即使經過十年開發後套用在C端場景中。的確，透過AR、3D掃描等方式將遠方好友請到家裏來，這是一個合理的套用，但它只是一種視覺模擬，在虛擬空間中的好友並不能坐在你家沙發上，也不能喝你倒的酒。那麽，除了比現有的AR/VR社交平台看起來更逼真寫實一些，Varjo Reality Cloud又有哪些不同呢？或許，Varjo應該再繼續思考一下這個平台有哪些不可替代的關鍵套用。參考：RoadtoVR
