18 个原生 DLL、30,738 个导出函数,以及一个让 Claude、GPT 或任何模型指挥实时空间场景的 MCP 服务器。这不是 Unity/Unreal 的替代品 — 而是拥有可供链接的透明内部结构的空间 AI 运行时。
阻力最小的路径:针对 Claude Desktop 或 Cursor 运行 MCP 服务器。无需安装 C++ SDK 即可开始。
MCP 服务器位于 raku-runtime 仓库的 src/mcp/。它是一个 Python 服务器 — 开始与运行中的实例对话无需 C++ 工具链。
将 MCP 服务器条目添加到您的 claude_desktop_config.json。Claude Desktop 会在重启时自动发现它。
现在 Claude 拥有 17 个原生 MCP 工具,以及通往 ~9,500 个 REST 端点的透传。生成对象、查询场景图、运行物理 — 全部通过自然语言。
当您超越 MCP 的能力时,可直接链接 RakuXR.dll 或 RakuRenderer.dll。全部 30,738 个导出都是公开符号 — dumpbin /exports 可全部列出,没有黑盒。
MCP 服务器暴露一组精选的场景感知工具,外加一个通用的 api_call 透传,可访问完整的约 9,500 个端点的 REST API。自带 Claude、GPT、Gemini、Copilot 或本地模型 — 没有模型锁定。
完整的代理驱动场景创作(生成、动画、脚本、锚定 — 完整循环)是 Phase 2 路线图目标。当前的 17 个工具涵盖查询、生成、变换、物理和资产操作。MCP 服务器文档 →
该引擎是 Raku Capture 的基底。用手机摄像头捕获的 3D 高斯泼溅成为一等场景对象 — 可通过与任何其他实体相同的 MCP 工具被任何 LLM 定位、锚定和寻址。同一条运行时路径在 XR、桌面和眼镜上运行。
splat_load 将捕获的 .spz 文件流式传输到实时场景中。泼溅立即继承场景图、物理和锚定子系统。
请 Claude 移动一个已捕获对象、查询泼溅中有什么,或将其锚定到真实世界位置 — MCP 表面将泼溅视同任何其他节点。
RakuXR 通过用于所有场景内容的同一条支持注视点 120 Hz 的流水线渲染泼溅 — 无需单独的查看器。
传感器融合输入到场景理解,进而钉住跨会话和设备保持位置的锚点。
滑动浏览流水线,以及构成引擎的 18 个原生 DLL — 按功能分组。
具备刚体、约束、射线投射和碰撞检测的生产级 3D 物理。即便在移动 XR 硬件上也能实现亚毫秒步进时间的确定性模拟。可通过 physics_apply MCP 工具完全寻址 — LLM 可通过自然语言提示施加力、查询碰撞状态并变更约束。
RakuPhysics.dll 中的 1,278 个导出函数具备按类型 VFX 预设的 GPU 加速粒子系统。支持发射器、吸引子、碰撞和 LOD 缩放。自动预算管理在 XR 硬件上将帧率锁定在 72–120 Hz。渲染器使用带 Vulkan 后端(RakuVulkan)的 DirectX 12 — 两条路径均通过 RakuRenderer.dll(3,677 个导出)导出。
具备混合树、状态机、IK 和重定向的骨骼动画。支持具有平滑过渡和运行时混合的并发动画角色。animation_play MCP 工具让 LLM 直接触发或混合动画状态 — 无需自定义集成。
RakuAnimation.dll 中的 1,900 个导出函数基于 HRTF 的 3D 空间音频,具备双耳渲染、遮挡、混响区和自适应音乐层。针对 XR 头显扬声器和耳机调优,CPU 开销极小。audio_play MCP 工具允许 LLM 在场景中任意 3D 位置放置声音。
RakuAudio.dll 中的 1,654 个导出函数我们不是 Unity 或 Unreal 的替代品。我们在它们薄弱之处取胜。这张表保持公开,因为开发者的信任比营销话术更重要。
| 能力 | RakuAI | Unity | Unreal Engine |
|---|---|---|---|
| LLM 驱动实时场景(MCP) | 原生 — 17 个工具 + ~9,500 端点透传 | 非内置;需自定义插件 | 非内置;需自定义插件 |
| 透明的原生导出 | 30,738 个公开符号 — 可直接链接任意 DLL | 封闭运行时;IL2CPP / 托管层 | 封闭运行时;UObject / 蓝图层 |
| 眼镜级散热预算 | RakuSLM 设备端推理;针对低于 5W 范围调优 | 非设计目标 | 非设计目标 |
| OpenXR 1.1(手/眼追踪、锚点) | RakuXR — 2,704 个导出,完整 OpenXR 面 | 通过 OpenXR 插件支持 | 通过 OpenXR 插件支持 |
| 泼溅 / 3DGS 作为一等场景对象 | 原生 — splat_load MCP 工具,场景图集成 | 第三方包;非场景图原生 | 第三方包;非场景图原生 |
| 编辑器工具与资产商店 | 早期阶段 — RakuEditor DLL;尚无图形编辑器 | 行业标准编辑器;大型资产商店 | 行业标准编辑器;Fab 市场 |
| 3A 主机流水线 | 非当前目标 | 完整主机认证支持 | 完整主机认证支持 |
| 文档广度 | 稀疏 — Phase 0(逐 DLL 参考待补) | 详尽 | 详尽 |
| 自带 LLM(无锁定) | 任何 MCP 兼容模型 — Claude、GPT、本地 | 无原生等价物 | 无原生等价物 |
| 导出数量可验证性 | dumpbin 输出已签入仓库 — 可审计 | N/A — 封闭运行时 | N/A — 封闭运行时 |
完整的诚实对比(更多子系统、许可、定价)→ compare.html
我们公开诚实的状态,让您能基于真实事实而非营销来评估运行时。
已发布且可信:18 个 C++ DLL,共 30,738 个导出函数(通过 dumpbin /exports 验证,作为 CI 工件追踪于 raku-runtime/dll_exports/)。src/mcp/ 处的 MCP 服务器已上线 17 个原生工具。RakuXR 中的 OpenXR 1.1 支持。NVIDIA Inception 成员(2026 年 5 月)。5 项美国授权专利(优先日:2012 年 7 月)。
活动缺陷:RakuAssets 有一个进行中的 LNK2001 链接器修复。其余 17 个 DLL 均 CI 通过;干净的 18/18 构建即将到来但尚未确认。修复落地后将移除此通知。
仍待完成(Phase 0 追踪项):逐 DLL 参考文档;已发布的 DLL 能力矩阵;"10 分钟驱动场景"快速入门视频。首批嵌入式 OEM 出货为 Phase 1。
导出数量说明:30,738 是文档化/主干基线。一个未合并的 WIP 分支的本地 Release 构建显示 +46(30,784)— 但仅 30,738 这个数字为对外正式使用。
每个子系统都针对 VR 与 AR 头显严苛的帧预算进行了优化 — 也针对 Unity 与 Unreal 并不瞄准的、智能眼镜硬件更紧的约束。
带自动 LOD 的注视点渲染流水线在每个头显档位上维持帧预算。
RakuSLM 瞄准智能眼镜硬件低于 5 W 的散热范围 — 而非外接 GPU 设备。
全部 30,738 个导出都是公开符号。在 C++ 层面进行剖析和优化 — 没有黑盒。
驱动 Raku Capture 的引擎由一家 NVIDIA Inception 成员打造。我们利用该计划的 NGC 目录、合作伙伴云积分和 DLI 培训来加速空间流水线。了解更多 →