根據來源資料,李飛飛教授目前最主要的商業實體為她創立的 World Labs,此外她也是史丹佛大學「以人為本人工智慧研究院」(HAI)的共同創辦人。
以下針對 World Labs 的產品、願景、價值主張及機器人領域的合作進行詳細說明:
1. 創立公司與主要產品:World Labs 與 Marble
- 主要公司: World Labs 是一家以研究為主導的空間智能公司。
- 核心產品: Marble。這是該公司的首個商業產品,定位為 3D 世界生成工具。
- 技術底座: Marble 背後的技術核心是 「即時幀模型」(Real-Time Frame Model, RTFM)。
- 產品特性:
- 空間一致性: 與一般的視訊生成模型不同,Marble 致力於生成具有**物體恆常性(Object Permanence)**的 3D 空間,即當使用者在生成的空間中轉身再轉回來時,物體依然存在且保持原狀,而非隨機變形。
- 多模態輸入: 支援純文字、單張或多張圖像、視訊,甚至是粗略的 3D 佈局作為輸入。
- 高效能: 其目標是在單張 H100 GPU 的算力約束下,實現高效的 3D 空間推理與即時生成。
2. 願景與價值主張
- 願景: 開啟 「空間智能」(Spatial Intelligence) 的新前沿,打造能理解物理世界、具備推理能力且能與之互動的 AI。
- 核心價值:
- 神經空間引擎(Neural Spatial Engine): 將 AI 打造為創作者(如遊戲開發者、建築師、影視特效師)的引擎,結合物理引擎的確定性與生成式 AI 的創造力。
- 以人為本(Human-Centered): 堅持 AI 應是用於 「增強 (augment)」 而非取代人類能力的工具,保護人類尊嚴與能動性。
- 數位多重宇宙: 透過大幅降低 3D 內容生成門檻,創造無限的數位平行世界,作為人類物理體驗的延伸。
3. 人形機器人與具身 AI 領域的合作夥伴
雖然 World Labs 目前側重於世界模型的基礎建設,但李飛飛教授及其史丹佛實驗室在具身 AI 領域已有深厚的合作佈局:
- NVIDIA(英偉達): 在 Behavior Benchmark 專案中,李飛飛團隊與 NVIDIA 的 Omniverse 團隊密切合作,利用其模擬環境為機器人提供具備物理規律(如熱能、光影、碰撞)的高保真訓練場景。
- 史丹佛醫學院及醫院: 在環境智能(Ambient Intelligence)與機器人輔助方面,與史丹佛醫學院、史丹佛兒童醫院及猶他州 Intermountain 醫院合作,開發能監控手部衛生、追蹤手術器械及協助搬運物資的機器人系統。
- 國際學術與醫療機構: 正開始與泰國、新加坡等地的機構合作,探索將具身 AI 應用於高齡者居家健康監測。
- World Labs 內部團隊: 該公司團隊包含在 NeRF(神經輻射場)、ImageNet、數字人生成等領域的頂尖科學家,致力於為具身 AI 提供所需的「世界理解」底層技術。
李飛飛認為,世界模型將成為機器人技術的突破點,因為它能提供無數虛擬訓練場景,解決現實數據稀缺的問題,讓機器人從「技能級任務」進化為能理解人類意圖的協作夥伴。