展會信息港展會大全

「AI 教母」李飛飛空間智能首個產品亮相!一張圖生成一個 3D 游戲世界,這次真不是 PPT
來源:互聯網   發(fā)布日期:2024-12-03 19:09:23   瀏覽:75次  

導讀:今天凌晨,李飛飛空間智能首個產品驚艷亮相。開局一張圖,它就能生成一個 3D 視頻游戲場景。雖說現在有不少 AI 都能把照片轉化為 3D 模型,但 World Labs 帶來的不只是建模,而是一個真正可交互、可編輯的活體世界。除了原始輸入的圖片,所有內容都是通過 AI 生成。World Labs 在博客中說道:大多數生成式 AI 工具都制作圖像或視頻等 2D 內容。相反,以 3D 形式生成可以提高控 ......

今天凌晨,李飛飛空間智能首個產品驚艷亮相。開局一張圖,它就能生成一個 3D 視頻游戲場景。雖說現在有不少 AI 都能把照片轉化為 3D 模型,但 World Labs 帶來的不只是建模,而是一個真正可交互、可編輯的活體世界。除了原始輸入的圖片,所有內容都是通過 AI 生成。

World Labs 在博客中說道:大多數生成式 AI 工具都制作圖像或視頻等 2D 內容。相反,以 3D 形式生成可以提高控制和一致性。這將改變我們制作電影、游戲、模擬器和物理世界的其他數字表現形式的方式。實際上,當前市場不乏 3D 生成模型,但通常會出現許多問題。比如初創(chuàng)公司 Decart 的 Minecraft 模擬器 Oasis,要么畫面不夠清晰,要么場景布局經;靵y。相比之下,World Labs 卻創(chuàng)造出了一個穩(wěn)定、真實且符合物理規(guī)則的 3D 世界。一個活的世界,比一千張死的圖片更有價值。「AI 教母」李飛飛空間智能首個產品亮相!一張圖生成一個 3D 游戲世界,這次真不是 PPT

一張圖生成一個 3D 游戲世界?李飛飛空間智能首秀開局一張圖,結局竟是一個世界?一起來看看 World Labs 產品生成的 3D 游戲世界。使用鼠標或鍵盤 W/A/S/D 自由穿行,然后用鼠標單擊并拖動來環(huán)顧四周:

體驗地址:https://www.worldlabs.ai/blog場景生成好后,你就成了一個虛擬攝影師,在瀏覽器里實時操控相機,想拍什么角度就拍什么角度,如同專業(yè)攝影。還能模擬淺景深,不過,只有距離相機一定距離的物體才能清晰對焦:

推拉鏡頭也沒問題。

World Labs 的核心突破在于,他們沒有止步于像素級的表面呈現,而是直指 3D 場景生成的本質優(yōu)勢:恒久的現實:創(chuàng)造出來的 3D 世界是穩(wěn)定的,不會消失或者偷偷改變。實時控制:生成場景后,想去哪去哪,甚至能湊近看花朵的每個細節(jié)。真實的物理規(guī)則:生成的世界遵循現實世界的物理法則,沒有漂浮的物體,沒有穿墻的 bug,就像現實世界一樣自然World Labs 還表示,通過深度貼圖技術,他們成功讓每個像素都有了真實的空間距離感。而圖片中每個像素的顏色,都是由它和攝像頭的距離來決定的。

不僅如此,World Labs 還給場景注入了靈魂添加各種互動特效,打造動畫效果,讓整個世界活起來。

來都來了,腦洞大開的 World Labs 還能把梵高、霍珀這些大師的名畫還原成可以探索的 3D 世界。不得不說,絕美。「AI 教母」李飛飛空間智能首個產品亮相!一張圖生成一個 3D 游戲世界,這次真不是 PPT

而且原畫里沒有的東西,它都能「腦補」出來,而且出奇地合理。

聯動 Midjourney,讓創(chuàng)作者玩轉 3D 新世界說到創(chuàng)作過程,3D 生成的世界還能和其他 AI 工具完美配合,這意味著創(chuàng)作者可以用自己熟悉的工具,創(chuàng)造出全新的體驗。比如說,World Labs 可以先使用文本到圖像模型生成圖像,從而從文本創(chuàng)建世界。不同的模型有自己的風格,而這些獨特的風格都能被保留下來。來看個具體的例子。World Labs 團隊基于同一提示詞,讓不同的 AI 畫了四個版本的青少年臥室。A vibrant cartoon-style teenager's bedroom with a bed covered in colorful blankets, a cluttered desk with a computer, posters on the walls, and scattered sports gear. A guitar leans against the wall, and a cozy, patterned rug is in the center. Light from a window adds a warm, youthful vibe to the room.一間充滿活力的卡通風格青少年臥室,床上鋪著五顏六色的毯子,雜亂的書桌上放著一臺電腦,墻上貼著海報,運動裝備散落。一把吉他靠在墻上,中間是一塊舒適的圖案地毯。窗外的光線為房間增添了溫暖、年輕的氛圍。

已經有一些創(chuàng)作者通過與 World Labs 達成合作,提前用上了。比如,Eric Solorio 就展示了怎么用它來設計人物動作和控制鏡頭。

而 Brittani Natali 則把 World Labs 的技術和 Midjourney、Runway、Suno、ElevenLabs 等工具組合起來,設計豐富的鏡頭運動,并創(chuàng)作出富有情感張力的短片。

不過,World Labs 也坦言:這些結果是我們生成 3D 世界的第一次早期預覽。我們正在努力提高生成世界的大小和保真度,并嘗試讓用戶與它們交互的新方式。另外,想試試嗎?現在可以去申請候補名單了。附上地址:https://forms.gle/tkfW7yMqMsCXWw4F7并且,World Labs 現在也在招人,總共開放應用 AI 研究工程師、業(yè)務運營、數據工程師、模型優(yōu)化工程師、產品設計師等 8 類崗位。感興趣可以去看看:https://jobs.ashbyhq.com/worldlabs「AI 教母」李飛飛空間智能首個產品亮相!一張圖生成一個 3D 游戲世界,這次真不是 PPT

值得注意的是,博客里提到頁面上所有的圖片均使用 FLUX 1.1 [pro]、Ideogram 或 Midjourney 生成,堪稱巧妙聯動。李飛飛本人也第一時間在 X 平臺站臺宣傳:

贊助本站

相關內容
AiLab云推薦
展開

熱門欄目HotCates

Copyright © 2010-2025 AiLab Team. 人工智能實驗室 版權所有    關于我們 | 聯系我們 | 廣告服務 | 公司動態(tài) | 免責聲明 | 隱私條款 | 工作機會 | 展會港