RakuAI 將你的相機看到的一切,化為你的 AI 助理可以走入、量測並更動的世界。
成員:現在的 Capture:手機掃描進,可拖曳潑濺出。AI 操控的 MCP 執行階段早已上線。
Capture 是手機體驗。將相機對準此 QR Code,即可開啟 Raku Capture 網頁應用,再掃描一個真實空間。
或直接開啟: rakuai.com/capture-app/
Raku Capture 由 NVIDIA Inception 成員打造。我們將 NVIDIA 加速的 3D 高斯潑濺(A10G / L40S 上的 Brush 訓練器)引入重建步驟,讓任一房間的手機掃描,在數分鐘內成為可探索的潑濺,並運用 NGC 目錄與該計畫的雲端額度。 閱讀公告 →
三件事,一條管線。現實以影片進入,一個空間世界產出。接著你的 AI 助理透過 MCP 棲居其中——它讀取場景,絕不悄悄改寫你的房間。
拿起相機對著一個空間移動。手機就夠了。不需要機架、不需要標記、不需要錄製棚。我們在這一步領先,因為只有這部分先誠實,其他一切才有趣。
影格變成具備真實幾何與尺度的高斯潑濺——一個你可以環視、量測、錨定的場景。執行階段保有物理、碰撞與變換的權威。
你的 AI 助理透過引擎已公開的相同六工具 MCP 合約連線。它可以看到場景、量測距離、模擬更動並採取動作——在你設定的權限範圍內,每一次呼叫皆受稽核。
誠實的取景:核心使用情境正朝早期存取邁進。其餘則是這條路將通向何處——已加上標籤,讓你能分辨今日真正可用的,與路線圖上的。
掃描一個房間。再向助理詢問眼前實際空間的問題——「這張沙發能沿著那面牆放下嗎?」「窗戶離書桌多遠?」。它根據量測到的場景回答,而不是猜測。
擷取到的空間可以在 RakuAI 執行階段中變成關卡、背景或可玩的場景。我們不承諾提示詞直接生成整款遊戲。我們是說:一次真實的掃描,是其中真實、可重複使用的一塊。
在眼鏡上,擷取會變成助理與你共享的持久空間孿生——已錨定、次毫米精度,貼合執行階段所設計的散熱包絡。
更長期的弧線是連續擷取:世界隨你的移動而更新,助理透過 ingest_frame 即時推理。如今這條路徑以 stub 驗證過。直到端到端交付為止,我們都會如此表述。
下方為概念素材。這些是排隊製作的示範,據實說明——是佔位符,而非偽裝成產品的擺拍片段。
一段不剪輯的片段:有人拿著手機繞房間走約二十秒,那房間的可拖曳高斯潑濺便出現了。沒有藏住工作的剪接。Capture 是我們的主張,因此我們展示 Capture。
同一次掃描,現在透過 MCP 接上助理。我們請它量測縫隙、檢查塞不塞得下、描述架上的物品——它都從擷取的場景回答。重點是助理對你自己的空間進行推理,不是一個標配空間。
Capture 是新的。但你的 AI 操控的執行階段不是。六工具 MCP 伺服器已上線、預設拒絕、每一次呼叫皆受稽核——任何會說 Model Context Protocol 的模型都可以透過它讀取場景。把它接到 Claude Desktop,開始就一個真實的空間提問吧。