5 项专利 | 9,500+ 个 API 端点 | 18 个原生 DLL | AI 原生空间游戏引擎 — 现已开放抢先体验 探索引擎 →

从你的 AI 助手驱动 RakuAI。

17 个原生 MCP 工具(5 个只读 + 12 个变更)加通用 api_call/api_search 透传至约 9,500 个 REST 端点。自 2026 年 3 月起已用于生产环境——现配有版本化公开工具合约、5 分钟只读接入路径,以及默认拒绝、审计日志权限管控。

RakuAI MCP 如何将 AI 助手连接至空间运行时 AI 助手通过 MCP 向 RakuAI 运行时发送经权限管控、JSON-Schema 校验的请求,运行时驱动场景图与物理模拟,并渲染至智能眼镜、头显和浏览器。 AI 助手 Claude · GPT Gemini · Copilot MCP stdio · JSON-Schema 权限管控 RakuAI 运行时 场景图 · 物理 渲染至 智能眼镜 低延迟显示 头显 VR / 混合现实 浏览器 WebGL 17 个原生工具 · 审计日志

工作原理

你的 AI 助手会说 MCP。RakuAI 就是这条连接另一端的运行时, 向眼镜、头显与浏览器驱动真实的空间输出。

RakuAI MCP 架构:你的 AI 助手通过 MCP 连接到 RakuAI 运行时,后者驱动智能眼镜、头显与浏览器,并暴露 17 个原生工具与通用透传。 你的 AI 助手 Claude · ChatGPT Gemini · Copilot MCP stdio · JSON-Schema 权限管控 RakuAI 运行时 场景图 · 物理 模拟步进 输出 智能眼镜 头显 · 浏览器 17 个原生 MCP 工具 load_world_model ingest_frame get_scene_state set_render_target start_simulation get_metrics 沙箱 / 开发 所有模式 显示 17 个原生工具中的 6 个

17 个原生工具

完整的原生 MCP 接口:5 个只读 + 12 个变更。经 Schema 校验、审计日志记录、权限管控。加通用 api_call/api_search 透传至约 9,500 个 REST 端点。17 工具接口现已作为版本化公开合约tools.v1.jsonschema_version 1)固定,并配有防漂移测试,保证已发布接口与线上注册表保持一致。

工具 功能 权限
get_scene_state(include_physics, include_transforms) 只读场景图快照 只读,所有模式
capture_scene(...) 捕获渲染时观测(颜色、深度、分割) 只读,所有模式
get_metrics() 性能遥测(帧时间、绘制调用、内存、延迟) 只读,所有模式
xr_get_session() 查看头显 / 眼镜会话状态 只读,所有模式
xr_list_anchors() 列出会话中的空间锚点 只读,所有模式
add_scene_node(...) 向场景图插入一个实体 变更,沙箱/开发
update_scene_node(...) 修改现有节点的属性 变更,沙箱/开发
set_node_transform(...) 位置 / 旋转 / 缩放 变更,沙箱/开发
remove_scene_node(...) 删除一个节点 变更,沙箱/开发
load_world_model(adapter_name, config) 绑定一个世界模型适配器(Runway、Veo、Marble、Genie、内容包) 变更,沙箱/开发
ingest_frame(adapter_name, frame_data, frame_index, timestamp) 将世界模型输出帧推入运行时 变更,沙箱/开发
set_render_target(target_type, config) 配置输出(WebGL/VR/原生/离屏) 变更,沙箱/开发
start_simulation(tick_rate, max_duration, realtime) 在沙箱模式下步进物理 + 世界模型 变更,沙箱/开发
xr_set_head_pose(...) 驱动头部姿态(模拟、录制或远程) 变更,沙箱/开发
xr_simulate_input(...) 注入控制器 / 手势追踪事件 变更,沙箱/开发
xr_create_anchor(...) 将节点锚定到世界坐标 变更,沙箱/开发
xr_remove_anchor(...) 释放一个锚点 变更,沙箱/开发

工具接口一览

17 个原生工具,按操作权限分组。左右滑动或使用箭头切换。

5 分钟接入——只读模式

只要你的模型会说 MCP,它就会说 RakuAI。把现有 MCP 客户端指向运行时,即可在免费沙箱中获得完整的只读会话——5 个只读工具,无模型绑定,无引擎 SDK,无变更风险。

添加服务器 在你的 MCP 客户端配置中注册 raku-mcp(Claude Desktop 或任何支持 MCP 的助手)。
启动只读会话 只读模式是默认模式。5 个只读工具在所有模式下均可运行,包括生产环境。
读取实时场景状态 调用 get_scene_stateget_metrics,即可看到运行时响应。这立刻带来实际价值。
进阶至沙箱 12 个变更工具在沙箱/开发模式下解锁,可端到端驱动场景。

详细步骤:只读接入快速入门LLM 集成指南驱动场景实操演练。站内文档:Claude Desktop 指南

多厂商兼容性

无论调用方是 Claude、ChatGPT、Gemini 还是 Copilot,合约完全相同——这正是差异化所在。我们发布一份兼容性矩阵,追踪各厂商对全部 17 个原生工具及透传的支持情况。兼容性在协议层保持一致;客户端特定的 Schema 处理差异在矩阵中公开记录。

厂商 17 个原生工具 透传 状态
Claude协议层协议层已发布
ChatGPT协议层协议层已发布
Gemini协议层协议层已发布
Copilot协议层协议层已发布

诚实说明:矩阵已发布,尚未经过独立验证。目前没有任何厂商完成了对全部 17 个工具 + 透传的完整合规性扫描——每个客户端的端到端验证是 Phase 1 的开放工作,在矩阵本身中追踪。

审计与权限

什么能让安全负责人批准一个在空间中自主行动的 AI 代理?变更操作在设计上需要授权,每次调用都被记录,中继层强制执行分层限制。

默认拒绝 所有 12 个变更工具在沙箱/开发模式下默认拒绝;只有 5 个只读工具在所有模式下可用。生产环境中的变更操作需要经过明确、审计过的权限授予。
按会话导出审计日志 每次中继调用均被记录;账户所有者可导出其跨 /api/raku/* 接口的按会话审计记录,支持脱敏处理。
速率限制与配额 中继接口上提供免费与付费的速率限制和配额管控,确保用量有界,按套餐可追溯。

诚实说明:审计导出目前作用于中继范围与账户全局,尚不支持按连接器细分;配额执行在中继计数存储已配置的情况下生效。按连接器粒度和签名审计日志在路线图中。

对比 Unity MCP

Unity MCP(刚刚发布):场景操作、资产摆放、 构建自动化——Claude Desktop 在设计时生成静态场景。

RakuAI MCP(自 2026 年 3 月起用于生产环境):世界模型编排—— 任意 LLM 每一帧都将意图流入模拟步进。

Unity 是你的 AI 拿起的工具。RakuAI 则是你的 AI 栖身的身体。

适配器

契约就是这 17 个原生工具。适配器则是合作伙伴接入的方式。今天经过验证的适配器为一方 / 参考实现;广泛的第三方适配器生态系统是路线图目标,而非当前状态。

VeoEnvironmentAdapter Google 的 Veo
RunwayEnvironmentAdapter Runway
自定义适配器 你的模型

适配器契约是公开的。构建一个,即可成为生态系统的一部分。

为什么 MCP 原生很重要

  1. 无需自定义集成——只要你的模型会说 MCP,它就会说 RakuAI。大约五分钟内即可以只读模式接入。
  2. 从设计上即多厂商兼容——Claude、ChatGPT、Gemini、Copilot 都驱动同样的 17 个原生工具;兼容性在协议层保持一致。
  3. 版本化合约——17 工具接口已固定为 tools.v1.json,配有防漂移测试,你集成的接口不会悄悄改变。
  4. 可防御的权限体系——默认拒绝、审计日志、Schema 校验,以及供安全审查使用的按会话审计日志导出。

今日已上线 vs 路线图

我们标注哪些已交付、哪些尚未交付——诚实定位是功能,而非注脚。

今日已上线

  • 17 个原生 MCP 工具,自 2026 年 3 月起用于生产环境
  • 版本化公开工具合约(tools.v1.json)+ 防漂移 CI 测试
  • 5 分钟只读接入路径 + 各厂商集成指南
  • 已发布、协议层多厂商兼容性矩阵
  • 默认拒绝变更操作;按会话审计日志导出
  • 免费与付费中继速率限制和配额管控
  • 通用 api_call/api_search 透传至约 9,500 个端点

路线图

  • 各厂商独立验证兼容性(矩阵单元已发布,尚未完成扫描)
  • 一键生产变更(今日需要明确、审计过的授权)
  • 按连接器审计粒度和签名审计日志
  • 广泛的第三方适配器生态系统(今日为一方 / 参考实现)
  • 产品内权限层级 UI;范围化权限配置文件
  • 多区域中继、SSO/SCIM、延迟 SLO

深入了解

选择一条路径。