自2012年Oculus Rift問(wèn)世開(kāi)始,國(guó)內(nèi)XR(AR、VR、MR等多種技術(shù)統(tǒng)稱(chēng),即擴(kuò)展現(xiàn)實(shí))行業(yè)經(jīng)歷了2016年的所謂VR元年,熬過(guò)2017年開(kāi)始的冰河期,再到2021年年底開(kāi)啟的元宇宙熱潮,在起起伏伏間逐步走向了成熟。
一位長(zhǎng)期關(guān)注XR的投資人告訴界面新聞,之前XR無(wú)法被稱(chēng)為一個(gè)產(chǎn)業(yè),一個(gè)重要原因在于沒(méi)有自己的產(chǎn)業(yè)鏈,而是與智能手機(jī)等產(chǎn)業(yè)共用產(chǎn)業(yè)鏈,但現(xiàn)在這種情況正在逐漸改變。高清晰度的顯示屏、精準(zhǔn)的傳感器以及強(qiáng)大的集成電路計(jì)算能力,都為XR體驗(yàn)提供了堅(jiān)實(shí)的技術(shù)基矗
與智能手機(jī)的發(fā)展歷程類(lèi)似,作為XR設(shè)備的核心組成部分,XR芯片的性能直接與用戶(hù)體驗(yàn)掛鉤,得到了多方主體的關(guān)注。頭部科技企業(yè)中如Apple、三星、Meta都曾在XR自研芯片上做出嘗試,在今年8月備受關(guān)注的Apple vision pro中就搭載了Apple R1專(zhuān)用芯片。
回望國(guó)內(nèi),XR芯片領(lǐng)域同樣不乏參與者,成立于2021年9月的萬(wàn)有引力正是其中之一。作為一家XR空間計(jì)算芯片設(shè)計(jì)公司,萬(wàn)有引力聚焦于XR設(shè)備專(zhuān)用芯片及相關(guān)組件研發(fā)的公司,以核心芯片為載體,硬件技術(shù)和算法作為支撐提供下一代XR空間計(jì)算的完整技術(shù)解決方案。
在衡量企業(yè)價(jià)值方面,頭部風(fēng)投機(jī)構(gòu)們向來(lái)敏銳。在成立至今的2年多的時(shí)間里,萬(wàn)有引力已經(jīng)完成了包含天使輪、Pre-A輪、Pre-A+輪、A輪的四輪融資,天使輪后每輪融資額均在億元人民幣級(jí)別,資方陣容中更是不乏紅杉資本、IDG資本、眾源資本等頭部風(fēng)投機(jī)構(gòu)。
XR芯片為什么必不可少?
眾所周知,VR設(shè)備旨在為用戶(hù)提供一個(gè)交互式的虛擬三維空間,而See-Through功能(即利用設(shè)備的前置攝像頭查看頭顯外部實(shí)時(shí)環(huán)境情況的功能,也被稱(chēng)為“透視功能”)則是為了打破虛擬空間,讓用戶(hù)對(duì)周?chē)恼鎸?shí)世界有所感知。
這項(xiàng)原本出自安全考慮的功能隨著行業(yè)的發(fā)展卻衍生出了更多可能性。Meta、微軟等企業(yè)都選擇借由See-Through功能在自身VR產(chǎn)品上增加更多AR向應(yīng)用以提升設(shè)備實(shí)用價(jià)值。
目前實(shí)現(xiàn)See-Through功能的技術(shù)路線主要包含VST(視頻透視Video See-Through)、OST(光學(xué)透視Optical See-Through)。Apple vision pro通過(guò)Eye Sight的功能鏈接虛擬與現(xiàn)實(shí),其背后的思路正是VST路線。
基于VST路線的XR設(shè)備通常配備有多個(gè)傳感器,這就意味著其芯片需要滿足高度計(jì)算密集型的應(yīng)用需求,能夠處理大量的圖像和數(shù)據(jù),提供更加流暢和逼真的虛擬現(xiàn)實(shí)和增強(qiáng)現(xiàn)實(shí)體驗(yàn)。
另一方面,當(dāng)身體運(yùn)動(dòng)和視覺(jué)反饋之間出現(xiàn)延遲時(shí),這種滯后可能會(huì)導(dǎo)致用戶(hù)眩暈,因此XR設(shè)備要有無(wú)延遲或低延遲處理的能力,以確保用戶(hù)可以更加自然、舒適地與虛擬環(huán)境進(jìn)行交互。
在行業(yè)伊始,VR一體機(jī)中普遍采用高通推出的驍龍XR2芯片,但是這款芯片是在智能手機(jī)芯片的基礎(chǔ)上調(diào)整得來(lái)的,并不能完全滿足XR設(shè)備對(duì)于交互和顯示的特殊需求。
“高清、低延遲、無(wú)眩暈的視頻穿透(VST)體驗(yàn)是讓空間計(jì)算從游戲主機(jī)進(jìn)入辦公和更普遍的消費(fèi)市場(chǎng)的關(guān)鍵,而讓這成為可能的是專(zhuān)用協(xié)處理器芯片。”礪思資本創(chuàng)始合伙人曹曦曾公開(kāi)表示,“這顆芯片不僅需要完成傳感器的數(shù)據(jù)融合,同時(shí)也要對(duì)傳感器數(shù)據(jù)進(jìn)行AI處理,配合主控芯片達(dá)到虛實(shí)結(jié)合和以假亂真的效果。”
Apple vision pro中所搭載的Apple R1芯片正是一款專(zhuān)用協(xié)處理器芯片,專(zhuān)門(mén)用于處理從Apple Vision Pro的各種傳感器獲得的數(shù)據(jù),與主處理器M2芯片協(xié)同工作。傳感器將其感測(cè)到的內(nèi)容轉(zhuǎn)換為數(shù)字?jǐn)?shù)據(jù)輸入,Apple R1芯片接收輸入數(shù)據(jù)并進(jìn)行實(shí)時(shí)處理,隨后輸出生成混合現(xiàn)實(shí)環(huán)境所需要的數(shù)據(jù)。
可以說(shuō)更快速、更高質(zhì)量處理傳感器數(shù)據(jù)是XR設(shè)備向用戶(hù)呈現(xiàn)混合現(xiàn)實(shí)環(huán)境的基礎(chǔ),無(wú)論是對(duì)于交互還是顯示,專(zhuān)用協(xié)處理器芯片的重要性都不言而喻。
專(zhuān)業(yè)團(tuán)隊(duì)下場(chǎng)
與科技巨頭相比,創(chuàng)業(yè)公司的優(yōu)勢(shì)就在于快速迭代、顛覆性開(kāi)發(fā)的能力。找好細(xì)分領(lǐng)域切入、迅速發(fā)力至關(guān)重要。
隨著XR技術(shù)在社交娛樂(lè)、生產(chǎn)生活、工業(yè)制造、醫(yī)療保艦教育培訓(xùn)等領(lǐng)域的應(yīng)用越來(lái)越廣泛,對(duì)高性能XR芯片的需求將持續(xù)增長(zhǎng)。在第三方XR專(zhuān)用芯片研發(fā)商相對(duì)稀缺的2021年,專(zhuān)業(yè)團(tuán)隊(duì)選擇下場(chǎng)創(chuàng)業(yè)。
公開(kāi)報(bào)道顯示,萬(wàn)有引力CEO在斯坦福攻讀電子工程博士之后加入蘋(píng)果,期間在XR方向上積累了豐富研發(fā)經(jīng)驗(yàn);其余聯(lián)創(chuàng)則分別來(lái)自蘋(píng)果、華為、Meta、Amazon,各自的專(zhuān)業(yè)領(lǐng)域包含XR芯片、顯示、光學(xué)、感知、算法等等。
萬(wàn)有引力所推出的第一款產(chǎn)品正是力求帶來(lái)極致體驗(yàn)的一款XR專(zhuān)用芯片GravityXR 仿生視覺(jué)芯片。據(jù)介紹,這款芯片在顯示、感知、圖像等多方面具備硬件加速處理的定制化設(shè)計(jì),提供多傳感器接口以及與之對(duì)應(yīng)的感知、圖像算法應(yīng)用以及高分辨/高幀率的顯示接口、與之對(duì)應(yīng)的顯示效果增強(qiáng)技術(shù)。
能力方面,這款芯片更智能地達(dá)到8K/120Hz;實(shí)現(xiàn)比AR更強(qiáng)的MR應(yīng)用,達(dá)到舒適,無(wú)眩暈;增強(qiáng)VR/MR的畫(huà)質(zhì)效果:高質(zhì)量的顯示/光學(xué)增強(qiáng)和相機(jī)處理;為感知技術(shù)提供足夠的靈活性和計(jì)算能力。
從整個(gè)產(chǎn)業(yè)來(lái)看,XR設(shè)備正在向下一代交互工具穩(wěn)步迭代。IDC統(tǒng)計(jì)數(shù)據(jù)顯示,VR\AR全球消費(fèi)支出在2022年為139億美元,并預(yù)計(jì)將在2026年增長(zhǎng)至509億美元,未來(lái)四年的全球市場(chǎng)規(guī)模年復(fù)合增長(zhǎng)率為32.3%。
長(zhǎng)期來(lái)看,當(dāng)XR設(shè)備從小眾游戲機(jī)、維修檢測(cè)等小場(chǎng)景產(chǎn)品迭代為手機(jī)一樣的大眾設(shè)備,XR芯片領(lǐng)域毫無(wú)疑問(wèn)將出現(xiàn)新的偉大公司。但是在當(dāng)前這一階段,初創(chuàng)芯片廠商還需要為長(zhǎng)期投入儲(chǔ)備彈藥。
由于半導(dǎo)體行業(yè)本身具備研發(fā)成本高、投入周期長(zhǎng)的特點(diǎn),初創(chuàng)芯片廠商必然要面對(duì)現(xiàn)金流的壓力。從芯片設(shè)計(jì)到流片、再到面向市場(chǎng)產(chǎn)生訂單,能否把握合適的商業(yè)化節(jié)奏至關(guān)重要。
據(jù)了解在芯片流片之前,萬(wàn)有引力與業(yè)界主要廠商合作開(kāi)發(fā)了系統(tǒng)級(jí)測(cè)試平臺(tái),這一合作使得他們能夠提前驗(yàn)證芯片的算法及架構(gòu)、展示部分芯片功能的整合以及實(shí)時(shí)VST效果,這將會(huì)有利于提升流片的成功率。
此前在36氪的報(bào)道中,萬(wàn)有引力創(chuàng)始團(tuán)隊(duì)曾預(yù)計(jì)第一代芯片將于2024年內(nèi)完成量產(chǎn),并表示團(tuán)隊(duì)已經(jīng)開(kāi)始跟諸多產(chǎn)業(yè)頭部玩家接觸,并且與部分玩家達(dá)成戰(zhàn)略研發(fā)合作。
在披露Pre-A+輪融資時(shí),萬(wàn)有引力曾表示下一輪融資所得資金將部分用于流片生產(chǎn)和下一代芯片的研發(fā)。這意味著萬(wàn)有引力正保持著長(zhǎng)期投入的心態(tài)、穩(wěn)步走向產(chǎn)品迭代的節(jié)奏上。
“虛擬現(xiàn)實(shí)是一個(gè)值得長(zhǎng)期去做的方向,”萬(wàn)有引力CEO曾這樣說(shuō),“我們和投資人都有信心,在這個(gè)硬科技的領(lǐng)域扎根,進(jìn)行長(zhǎng)期投入。”
來(lái)源:界面新聞 作者:陳顯