展會信息港展會大全

Snap推出集合AI模型的新AR眼鏡:支持語音交互,可搭積木可遛寵物
來源:互聯(lián)網(wǎng)   發(fā)布日期:2024-09-18 18:46:40   瀏覽:2429次  

導讀:多知9月18日消息,Snapchat背后的公司Snap剛剛推出了第五代SpectaclesSpectacles24,這是一款全新的AR眼鏡。這款眼鏡在視野、分辨率和手部追蹤等方面進行了改進,并更新了其軟件堆棧。 該眼鏡的售價為1200美元,首批將面向開發(fā)者用戶,采用硬件即服務的方式...

多知9月18日消息,Snapchat背后的公司Snap剛剛推出了第五代SpectaclesSpectacles’24,這是一款全新的AR眼鏡。這款眼鏡在視野、分辨率和手部追蹤等方面進行了改進,并更新了其軟件堆棧。

Snap推出集合AI模型的新AR眼鏡:支持語音交互,可搭積木可遛寵物

該眼鏡的售價為1200美元,首批將面向開發(fā)者用戶,采用“硬件即服務”的方式銷售產(chǎn)品,提供了每月99美元的月租模式,為期一年。

Snap公司強調(diào),Spectacles軟件平臺“沒有開發(fā)者稅”,意味著公司不會從開發(fā)者的收入中抽成。

Snap對Spectacles的軟件進行了全面升級,推出了全新的SnapOS操作系統(tǒng)。新系統(tǒng)以手部追蹤為核心,提供了統(tǒng)一的界面和交互方式。

Spectacles佩戴者能夠要求生成 AI 圖像作為 AR 濾鏡,或與 Snap 的 AI 聊天機器人 MyAI 互動,獲取視野內(nèi)物體的相關信息。

此外,Spectacles ’24還支持社交功能,能夠識別附近其他眼鏡并無縫加入會話。

這款眼鏡同時支持“旁觀者”模式,允許智能手機用戶看到你的AR會話。與Quest和Apple Vision Pro等頭顯的觀眾視角不同,智能手機視角實際上是從第三方用戶自己的視角來感知AR內(nèi)容,而不僅僅說頭顯用戶的第一人稱視角。

智能手機同時可以作為控制器,或者你可以將智能手機中的應用鏡像到眼鏡之中,這樣你就可以看到應用程序的浮動視圖(但不是交互式)。上述社交和智能手機可擴展功能只適用于專門為它們設計的應用和體驗,但在操作系統(tǒng)/SDK級別提供支持開辟了有趣的可能性。

這款新眼鏡的電池續(xù)航時間約為45分鐘,電池安裝在鏡框內(nèi),靠近眼鏡臂的柄部。眼鏡重量為226 克,比Vision Pro輕了60%多,比Meta的雷朋智能眼鏡重一些。與其他AR或混合現(xiàn)實產(chǎn)品不同,眼鏡不需要太多校準或定制配件。

與早期的眼鏡型號一樣,當內(nèi)容被捕獲時,一個小而可見的LED燈會閃爍。在拍攝照片或視頻等內(nèi)容時,也會發(fā)出鐘聲。

Snap還發(fā)布了Lens Studio 5.0,用于構建Snapchat和Spectacles 的AR體驗。新版本支持更復雜的Lens,包括TypeScript和JavaScript,并提供了改進的版本控制工具。

此外,開發(fā)者能夠使用SnapML直接在Lens中使用自定義ML模型,通過與OpenAI合作,將把云托管的多模態(tài)AI模型引入至Spectacles。

這款眼鏡內(nèi)置了多個應用程序,包括打擊樂游戲、高爾夫模擬器和虛擬寵物體驗。

此外,Snap公司還與ILM Immersive、Niantic、樂高和Wabisabi Games等進行了合作為該平臺打造定制 AR 體驗。如ILM Immersive公司將為為可穿戴平臺推出一款《星球大戰(zhàn)》游戲,而 Pokémon GO 制造商 Niantic 將帶來其游戲 Peridot 和 Scaniverse。

樂高與Snapchat合作,將Bricktacular引入Spectacles中。在一個簡短的演示中,Lens體驗可以在一個表面上渲染各種各樣的積木塊,就像在現(xiàn)實生活中一樣。用戶可以旋轉(zhuǎn)和操縱每一個積木塊,把一個放在另一個上,建造一個積木小房子。積木塊用完了,用戶還可以用內(nèi)置的麥克風用語音命令系統(tǒng)制作新的積木塊,還可以要求特定的顏色。

《麻省理工技術評論》作者提到了使用體驗:“在一個普通的房間內(nèi),佩戴上Spectacles’24,可以將樂高積木堆放在桌子上,將AR高爾夫球擊入房間另一側(cè)的洞中,用雙手在天花板和墻壁上畫花和藤蔓,并詢問我正在看的物體并得到 Snap 虛擬 AI 聊天機器人的回答。甚至還有一只來自Niantic的紫色虛擬小狗,跟著我在房間里走來走去,然后走到陽臺上。”

用戶可以通過語音和手勢的組合來控制這一切。

Snap推出集合AI模型的新AR眼鏡:支持語音交互,可搭積木可遛寵物

Snap在2016年至2019年推出的前三代Spectacles為消費設備,沒有任何顯示屏或揚聲器,它們純粹作為相機眼鏡使用,沒有音頻輸出和AI功能。

第四代Spectacles于2021年推出,配備了用于真正AR的波導顯示屏,但僅以非常有限的數(shù)量提供給選定的開發(fā)者。它們是一種真正的太陽鏡形態(tài)的獨立AR設備,配備了高通Snapdragon XR1芯片組,視野非常小,活躍電池壽命僅為30分鐘。

新的第五代Snap Spectacles提供了更廣闊的視野,更長的電池壽命,更強大的處理器,以及更高的透明度,以便旁觀者可以看到佩戴者的眼睛。

Snap推出集合AI模型的新AR眼鏡:支持語音交互,可搭積木可遛寵物

贊助本站

相關內(nèi)容
AiLab云推薦
展開

熱門欄目HotCates

Copyright © 2010-2024 AiLab Team. 人工智能實驗室 版權所有    關于我們 | 聯(lián)系我們 | 廣告服務 | 公司動態(tài) | 免責聲明 | 隱私條款 | 工作機會 | 展會港