展會(huì)信息港展會(huì)大全

Snap推出集合AI模型的新AR眼鏡:支持語音交互,可搭積木可遛寵物
來源:互聯(lián)網(wǎng)   發(fā)布日期:2024-09-18 18:46:40   瀏覽:2429次  

導(dǎo)讀:多知9月18日消息,Snapchat背后的公司Snap剛剛推出了第五代SpectaclesSpectacles24,這是一款全新的AR眼鏡。這款眼鏡在視野、分辨率和手部追蹤等方面進(jìn)行了改進(jìn),并更新了其軟件堆棧。 該眼鏡的售價(jià)為1200美元,首批將面向開發(fā)者用戶,采用硬件即服務(wù)的方式...

多知9月18日消息,Snapchat背后的公司Snap剛剛推出了第五代SpectaclesSpectacles’24,這是一款全新的AR眼鏡。這款眼鏡在視野、分辨率和手部追蹤等方面進(jìn)行了改進(jìn),并更新了其軟件堆棧。

Snap推出集合AI模型的新AR眼鏡:支持語音交互,可搭積木可遛寵物

該眼鏡的售價(jià)為1200美元,首批將面向開發(fā)者用戶,采用“硬件即服務(wù)”的方式銷售產(chǎn)品,提供了每月99美元的月租模式,為期一年。

Snap公司強(qiáng)調(diào),Spectacles軟件平臺(tái)“沒有開發(fā)者稅”,意味著公司不會(huì)從開發(fā)者的收入中抽成。

Snap對(duì)Spectacles的軟件進(jìn)行了全面升級(jí),推出了全新的SnapOS操作系統(tǒng)。新系統(tǒng)以手部追蹤為核心,提供了統(tǒng)一的界面和交互方式。

Spectacles佩戴者能夠要求生成 AI 圖像作為 AR 濾鏡,或與 Snap 的 AI 聊天機(jī)器人 MyAI 互動(dòng),獲取視野內(nèi)物體的相關(guān)信息。

此外,Spectacles ’24還支持社交功能,能夠識(shí)別附近其他眼鏡并無縫加入會(huì)話。

這款眼鏡同時(shí)支持“旁觀者”模式,允許智能手機(jī)用戶看到你的AR會(huì)話。與Quest和Apple Vision Pro等頭顯的觀眾視角不同,智能手機(jī)視角實(shí)際上是從第三方用戶自己的視角來感知AR內(nèi)容,而不僅僅說頭顯用戶的第一人稱視角。

智能手機(jī)同時(shí)可以作為控制器,或者你可以將智能手機(jī)中的應(yīng)用鏡像到眼鏡之中,這樣你就可以看到應(yīng)用程序的浮動(dòng)視圖(但不是交互式)。上述社交和智能手機(jī)可擴(kuò)展功能只適用于專門為它們?cè)O(shè)計(jì)的應(yīng)用和體驗(yàn),但在操作系統(tǒng)/SDK級(jí)別提供支持開辟了有趣的可能性。

這款新眼鏡的電池續(xù)航時(shí)間約為45分鐘,電池安裝在鏡框內(nèi),靠近眼鏡臂的柄部。眼鏡重量為226 克,比Vision Pro輕了60%多,比Meta的雷朋智能眼鏡重一些。與其他AR或混合現(xiàn)實(shí)產(chǎn)品不同,眼鏡不需要太多校準(zhǔn)或定制配件。

與早期的眼鏡型號(hào)一樣,當(dāng)內(nèi)容被捕獲時(shí),一個(gè)小而可見的LED燈會(huì)閃爍。在拍攝照片或視頻等內(nèi)容時(shí),也會(huì)發(fā)出鐘聲。

Snap還發(fā)布了Lens Studio 5.0,用于構(gòu)建Snapchat和Spectacles 的AR體驗(yàn)。新版本支持更復(fù)雜的Lens,包括TypeScript和JavaScript,并提供了改進(jìn)的版本控制工具。

此外,開發(fā)者能夠使用SnapML直接在Lens中使用自定義ML模型,通過與OpenAI合作,將把云托管的多模態(tài)AI模型引入至Spectacles。

這款眼鏡內(nèi)置了多個(gè)應(yīng)用程序,包括打擊樂游戲、高爾夫模擬器和虛擬寵物體驗(yàn)。

此外,Snap公司還與ILM Immersive、Niantic、樂高和Wabisabi Games等進(jìn)行了合作為該平臺(tái)打造定制 AR 體驗(yàn)。如ILM Immersive公司將為為可穿戴平臺(tái)推出一款《星球大戰(zhàn)》游戲,而 Pokémon GO 制造商 Niantic 將帶來其游戲 Peridot 和 Scaniverse。

樂高與Snapchat合作,將Bricktacular引入Spectacles中。在一個(gè)簡短的演示中,Lens體驗(yàn)可以在一個(gè)表面上渲染各種各樣的積木塊,就像在現(xiàn)實(shí)生活中一樣。用戶可以旋轉(zhuǎn)和操縱每一個(gè)積木塊,把一個(gè)放在另一個(gè)上,建造一個(gè)積木小房子。積木塊用完了,用戶還可以用內(nèi)置的麥克風(fēng)用語音命令系統(tǒng)制作新的積木塊,還可以要求特定的顏色。

《麻省理工技術(shù)評(píng)論》作者提到了使用體驗(yàn):“在一個(gè)普通的房間內(nèi),佩戴上Spectacles’24,可以將樂高積木堆放在桌子上,將AR高爾夫球擊入房間另一側(cè)的洞中,用雙手在天花板和墻壁上畫花和藤蔓,并詢問我正在看的物體并得到 Snap 虛擬 AI 聊天機(jī)器人的回答。甚至還有一只來自Niantic的紫色虛擬小狗,跟著我在房間里走來走去,然后走到陽臺(tái)上。”

用戶可以通過語音和手勢的組合來控制這一切。

Snap推出集合AI模型的新AR眼鏡:支持語音交互,可搭積木可遛寵物

Snap在2016年至2019年推出的前三代Spectacles為消費(fèi)設(shè)備,沒有任何顯示屏或揚(yáng)聲器,它們純粹作為相機(jī)眼鏡使用,沒有音頻輸出和AI功能。

第四代Spectacles于2021年推出,配備了用于真正AR的波導(dǎo)顯示屏,但僅以非常有限的數(shù)量提供給選定的開發(fā)者。它們是一種真正的太陽鏡形態(tài)的獨(dú)立AR設(shè)備,配備了高通Snapdragon XR1芯片組,視野非常小,活躍電池壽命僅為30分鐘。

新的第五代Snap Spectacles提供了更廣闊的視野,更長的電池壽命,更強(qiáng)大的處理器,以及更高的透明度,以便旁觀者可以看到佩戴者的眼睛。

Snap推出集合AI模型的新AR眼鏡:支持語音交互,可搭積木可遛寵物

贊助本站

相關(guān)內(nèi)容
AiLab云推薦
推薦內(nèi)容
展開

熱門欄目HotCates

Copyright © 2010-2024 AiLab Team. 人工智能實(shí)驗(yàn)室 版權(quán)所有    關(guān)于我們 | 聯(lián)系我們 | 廣告服務(wù) | 公司動(dòng)態(tài) | 免責(zé)聲明 | 隱私條款 | 工作機(jī)會(huì) | 展會(huì)港