18 個原生 DLL、30,738 個匯出函式,以及一個讓 Claude、GPT 或任何模型指揮即時空間場景的 MCP 伺服器。這不是 Unity/Unreal 的替代品 — 而是擁有可供連結的透明內部結構的空間 AI 執行階段。
阻力最小的路徑:針對 Claude Desktop 或 Cursor 執行 MCP 伺服器。無需安裝 C++ SDK 即可開始。
MCP 伺服器位於 raku-runtime 儲存庫的 src/mcp/。它是一個 Python 伺服器 — 開始與執行中的執行個體對話無需 C++ 工具鏈。
將 MCP 伺服器項目加入您的 claude_desktop_config.json。Claude Desktop 會在重新啟動時自動探索它。
現在 Claude 擁有 17 個原生 MCP 工具,以及通往 ~9,500 個 REST 端點的傳遞。生成物件、查詢場景圖、執行物理 — 全部透過自然語言。
當您超越 MCP 的能力時,可直接連結 RakuXR.dll 或 RakuRenderer.dll。全部 30,738 個匯出都是公開符號 — dumpbin /exports 可全部列出,沒有黑盒。
MCP 伺服器公開一組精選的場景感知工具,外加一個通用的 api_call 傳遞,可存取完整的約 9,500 個端點的 REST API。自帶 Claude、GPT、Gemini、Copilot 或本機模型 — 沒有模型鎖定。
完整的代理驅動場景創作(生成、動畫、指令碼、錨定 — 完整迴圈)是 Phase 2 路線圖目標。目前的 17 個工具涵蓋查詢、生成、變換、物理和資產操作。MCP 伺服器文件 →
該引擎是 Raku Capture 的基底。用手機相機擷取的 3D 高斯潑濺成為一級場景物件 — 可透過與任何其他實體相同的 MCP 工具被任何 LLM 定位、錨定和定址。同一條執行階段路徑在 XR、桌面和眼鏡上執行。
splat_load 將擷取的 .spz 檔案串流到即時場景中。潑濺立即繼承場景圖、物理和錨定子系統。
請 Claude 移動一個已擷取物件、查詢潑濺中有什麼,或將其錨定到真實世界位置 — MCP 表面將潑濺視同任何其他節點。
RakuXR 透過用於所有場景內容的同一條支援注視點 120 Hz 的管線算繪潑濺 — 無需單獨的檢視器。
感測器融合輸入到場景理解,進而釘住跨工作階段和裝置保持位置的錨點。
滑動瀏覽管線,以及構成引擎的 18 個原生 DLL — 依功能分組。
具備剛體、約束、射線投射和碰撞偵測的生產級 3D 物理。即便在行動 XR 硬體上也能達成次毫秒步進時間的確定性模擬。可透過 physics_apply MCP 工具完全定址 — LLM 可透過自然語言提示施加力、查詢碰撞狀態並變更約束。
RakuPhysics.dll 中的 1,278 個匯出函式具備依類型 VFX 預設的 GPU 加速粒子系統。支援發射器、吸引子、碰撞和 LOD 縮放。自動預算管理在 XR 硬體上將影格率鎖定在 72–120 Hz。算繪器使用帶 Vulkan 後端(RakuVulkan)的 DirectX 12 — 兩條路徑均透過 RakuRenderer.dll(3,677 個匯出)匯出。
具備混合樹、狀態機、IK 和重定向的骨架動畫。支援具有平滑轉場和執行階段混合的並行動畫角色。animation_play MCP 工具讓 LLM 直接觸發或混合動畫狀態 — 無需自訂整合。
RakuAnimation.dll 中的 1,900 個匯出函式基於 HRTF 的 3D 空間音訊,具備雙耳算繪、遮蔽、混響區和自適應音樂層。針對 XR 頭戴裝置喇叭和耳機調校,CPU 額外負荷極小。audio_play MCP 工具允許 LLM 在場景中任意 3D 位置放置聲音。
RakuAudio.dll 中的 1,654 個匯出函式我們不是 Unity 或 Unreal 的替代品。我們在它們薄弱之處取勝。這張表保持公開,因為開發者的信任比行銷話術更重要。
| 能力 | RakuAI | Unity | Unreal Engine |
|---|---|---|---|
| LLM 驅動即時場景(MCP) | 原生 — 17 個工具 + ~9,500 端點傳遞 | 非內建;需自訂外掛 | 非內建;需自訂外掛 |
| 透明的原生匯出 | 30,738 個公開符號 — 可直接連結任意 DLL | 封閉執行階段;IL2CPP / 受管層 | 封閉執行階段;UObject / 藍圖層 |
| 眼鏡級散熱預算 | RakuSLM 裝置端推論;針對低於 5W 範圍調校 | 非設計目標 | 非設計目標 |
| OpenXR 1.1(手/眼追蹤、錨點) | RakuXR — 2,704 個匯出,完整 OpenXR 面 | 透過 OpenXR 外掛支援 | 透過 OpenXR 外掛支援 |
| 潑濺 / 3DGS 作為一級場景物件 | 原生 — splat_load MCP 工具,場景圖整合 | 第三方套件;非場景圖原生 | 第三方套件;非場景圖原生 |
| 編輯器工具與資產商店 | 早期階段 — RakuEditor DLL;尚無圖形編輯器 | 業界標準編輯器;大型資產商店 | 業界標準編輯器;Fab 市集 |
| 3A 主機管線 | 非目前目標 | 完整主機認證支援 | 完整主機認證支援 |
| 文件廣度 | 稀疏 — Phase 0(逐 DLL 參考待補) | 詳盡 | 詳盡 |
| 自帶 LLM(無鎖定) | 任何 MCP 相容模型 — Claude、GPT、本機 | 無原生對等物 | 無原生對等物 |
| 匯出數量可驗證性 | dumpbin 輸出已簽入儲存庫 — 可稽核 | N/A — 封閉執行階段 | N/A — 封閉執行階段 |
完整的誠實比較(更多子系統、授權、定價)→ compare.html
我們公開誠實的狀態,讓您能基於真實事實而非行銷來評估執行階段。
已發佈且可信:18 個 C++ DLL,共 30,738 個匯出函式(透過 dumpbin /exports 驗證,作為 CI 構件追蹤於 raku-runtime/dll_exports/)。src/mcp/ 處的 MCP 伺服器已上線 17 個原生工具。RakuXR 中的 OpenXR 1.1 支援。NVIDIA Inception 成員(2026 年 5 月)。5 項美國已獲核准專利(優先權日:2012 年 7 月)。
作用中的缺陷:RakuAssets 有一個進行中的 LNK2001 連結器修復。其餘 17 個 DLL 均 CI 通過;乾淨的 18/18 建置即將到來但尚未確認。修復落地後將移除此通知。
仍待完成(Phase 0 追蹤項):逐 DLL 參考文件;已發佈的 DLL 能力矩陣;「10 分鐘驅動場景」快速入門影片。首批嵌入式 OEM 出貨為 Phase 1。
匯出數量說明:30,738 是文件化/主幹基準。一個未合併的 WIP 分支的本機 Release 建置顯示 +46(30,784)— 但僅 30,738 這個數字為對外正式使用。
每個子系統都針對 VR 與 AR 頭戴裝置嚴苛的影格預算進行了最佳化 — 也針對 Unity 與 Unreal 並不鎖定的、智慧眼鏡硬體更緊的限制。
帶自動 LOD 的注視點算繪管線在每個頭戴裝置等級上維持影格預算。
RakuSLM 鎖定智慧眼鏡硬體低於 5 W 的散熱範圍 — 而非外接 GPU 設備。
全部 30,738 個匯出都是公開符號。在 C++ 層面進行剖析和最佳化 — 沒有黑盒。
驅動 Raku Capture 的引擎由一家 NVIDIA Inception 成員打造。我們運用該計畫的 NGC 目錄、合作夥伴雲端點數和 DLI 培訓來加速空間管線。了解更多 →