5 Patente | 9.500+ API-Endpunkte | 18 native DLLs | Die KI-native Spatial Runtime — jetzt im Early Access

RakuAI aus deinem KI-Assistenten steuern.

17 native MCP-Tools (5 lesend + 12 mutierend) plus universeller api_call/api_search-Passthrough zu ~9.500 REST-Endpunkten. In Produktion seit März 2026 — jetzt mit einem versionierten öffentlichen Tool-Vertrag, einem 5-Minuten-Lesezugriffspfad und Deny-by-Default-Berechtigungen mit vollständigem Audit-Log.

Wie RakuAI MCP einen KI-Assistenten mit einer Spatial-Runtime verbindet Ein KI-Assistent sendet berechtigungsgesteuerte, JSON-Schema-Anfragen über MCP an die RakuAI-Runtime, die einen Szenengraph und eine Physiksimulation steuert und an Smart Glasses, Headsets und den Browser rendert. KI-Assistent Claude · GPT Gemini · Copilot MCP stdio · JSON-Schema berechtigungsgesteuert RakuAI Runtime Szenengraph · Physik rendert an Smart Glasses Low-Latency-Display Headset VR / Mixed Reality Browser WebGL 17 native Tools · audit-protokolliert

So funktioniert es

Ihr KI-Assistent spricht MCP. RakuAI ist die Runtime am anderen Ende dieser Verbindung und steuert echte räumliche Ausgaben an Brillen, Headsets und den Browser.

RakuAI-MCP-Architektur: Ihr KI-Assistent verbindet sich über MCP mit der RakuAI-Runtime, die Smart Glasses, Headsets und den Browser ansteuert und 17 native Tools plus universellen Passthrough bereitstellt. Ihr KI-Assistent Claude · ChatGPT Gemini · Copilot MCP stdio · JSON-Schema berechtigungsgesteuert RakuAI Runtime Szenengraph · Physik Simulationsschritt Ausgabe Smart Glasses Headset · Browser 17 native MCP-Tools load_world_model ingest_frame get_scene_state set_render_target start_simulation get_metrics Sandbox / Dev Alle Modi

Die 17 nativen Tools

Die vollständige native MCP-Schnittstelle: 5 lesend + 12 mutierend. Schema-validiert, audit-protokolliert, berechtigungsgesteuert. Plus universeller api_call/api_search-Passthrough zu ~9.500 raku-api REST-Endpunkten. Die 17-Tool-Oberfläche ist als versionierter öffentlicher Vertrag (tools.v1.json, schema_version 1) fixiert, mit einem Anti-Drift-Test.

Tool Was es tut Berechtigung
get_scene_state(include_physics, include_transforms) Schreibgeschützter Szenengraph-Snapshot Lesend, alle Modi
capture_scene(...) Render-Beobachtung erfassen (Farbe, Tiefe, Segmentierung) Lesend, alle Modi
get_metrics() Performance-Telemetrie (Frame-Zeit, Draw Calls, Speicher, Latenz) Lesend, alle Modi
xr_get_session() Headset-/Brillen-Session-Zustand abfragen Lesend, alle Modi
xr_list_anchors() Räumliche Anker in der Session auflisten Lesend, alle Modi
add_scene_node(...) Eine Entität in den Szenengraph einfügen Mutierend, Sandbox/Dev
update_scene_node(...) Eigenschaften eines vorhandenen Knotens ändern Mutierend, Sandbox/Dev
set_node_transform(...) Position / Rotation / Skalierung Mutierend, Sandbox/Dev
remove_scene_node(...) Einen Knoten löschen Mutierend, Sandbox/Dev
load_world_model(adapter_name, config) Einen World-Model-Adapter binden (Runway, Veo, Marble, Genie, Content-Pack) Mutierend, Sandbox/Dev
ingest_frame(adapter_name, frame_data, frame_index, timestamp) Einen World-Model-Ausgabe-Frame in die Runtime einspeisen Mutierend, Sandbox/Dev
set_render_target(target_type, config) Ausgabe konfigurieren (WebGL/VR/nativ/offscreen) Mutierend, Sandbox/Dev
start_simulation(tick_rate, max_duration, realtime) Physik + World-Model im Sandbox-Modus durchlaufen lassen Mutierend, Sandbox/Dev
xr_set_head_pose(...) Kopfpose steuern (Sim, Aufzeichnung oder Remote) Mutierend, Sandbox/Dev
xr_simulate_input(...) Controller-/Hand-Tracking-Ereignisse injizieren Mutierend, Sandbox/Dev
xr_create_anchor(...) Einen Knoten an Weltkoordinaten verankern Mutierend, Sandbox/Dev
xr_remove_anchor(...) Einen Anker lösen Mutierend, Sandbox/Dev

Die Oberfläche auf einen Blick

17 native Tools, nach erlaubten Aktionen gruppiert.

5 lesende Tools Alle Modi — auch Produktion get_scene_state · capture_scene · get_metrics · xr_get_session · xr_list_anchors
12 mutierende Tools Deny-by-Default · Sandbox/Dev add/update/remove_scene_node · set_node_transform · load_world_model · ingest_frame · set_render_target · start_simulation · xr_set_head_pose · xr_simulate_input · xr_create_anchor · xr_remove_anchor
+ Passthrough api_call / api_search → ~9.500 Endpunkte

In 5 Minuten verbinden — nur lesend

Wenn dein Modell MCP spricht, spricht es RakuAI. Richte einen vorhandenen MCP-Client auf die Runtime und erhalte eine funktionierende Lesezugriffs-Session — die 5 lesenden Tools — auf einer kostenlosen Sandbox. Kein Modell-Lock-in, kein Engine-SDK, kein Mutations-Risiko.

Server hinzufügen Trage raku-mcp in der Konfiguration deines MCP-Clients ein (Claude Desktop oder ein beliebiger MCP-fähiger Assistent).
Lesezugriffs-Session starten Lesezugriff ist der Standard. Die 5 lesenden Tools laufen in jedem Modus, auch in Produktion.
Live-Szenenzustand lesen Rufe get_scene_state und get_metrics auf, um die Runtime antworten zu sehen.
Zu Sandbox aufsteigen Die 12 mutierenden Tools werden in Sandbox/Dev freigeschaltet, damit du eine Szene vollständig steuern kannst.

Schritt für Schritt: der Lesezugriffs-Schnellstart, der LLM-Integrationsleitfaden und ein Szenenwalkthrough. Auf der Website: die Claude-Desktop-Anleitung.

Herstellerunabhängige Parität

Der Vertrag ist identisch, unabhängig davon, ob der Aufrufer Claude, ChatGPT, Gemini oder Copilot ist. Wir veröffentlichen eine Paritätsmatrix. Parität gilt auf Protokollebene; anbieterspezifisches Schema-Handling wird offen verfolgt.

Anbieter 17 native Tools Passthrough Status
ClaudeProtokollebeneProtokollebeneVeröffentlicht
ChatGPTProtokollebeneProtokollebeneVeröffentlicht
GeminiProtokollebeneProtokollebeneVeröffentlicht
CopilotProtokollebeneProtokollebeneVeröffentlicht

Ehrliche Anmerkung: Die Matrix ist veröffentlicht, aber noch nicht unabhängig verifiziert. Per-Client-End-to-End-Verifizierung ist offene Phase-1-Arbeit.

Audit & Berechtigungen

Was einem Sicherheitsverantwortlichen erlaubt, einen autonomen Agenten im Raum zu genehmigen? Mutation ist standardmäßig gesperrt, jeder Aufruf wird protokolliert.

Deny-by-Default Alle 12 mutierenden Tools sind standardmäßig auf Sandbox/Dev beschränkt. Produktionsmutationen erfordern eine explizite, auditierte Berechtigungsgewährung.
Audit-Log-Export pro Session Jeder Relay-Aufruf wird aufgezeichnet; das besitzende Konto kann sein sessionbezogenes Audit-Log exportieren, mit Schwärzungsschutz.
Rate-Limits & Kontingent Free- vs. Paid-Relay-Rate-Limit- und Kontingent-Plumbing auf der Relay-Oberfläche, damit die Nutzung pro Tarif begrenzt und nachvollziehbar ist.

Ehrliche Anmerkung: Der Audit-Export ist heute relay-scoped und kontoweit, noch nicht pro Connector. Granularität pro Connector und signierte Audit-Logs sind auf der Roadmap.

vs Unity MCP

Unity MCP (gerade veröffentlicht): Szenenmanipulation, Asset-Platzierung, Build-Automatisierung — Claude Desktop erzeugt statische Szenen zur Designzeit.

RakuAI MCP (produktiv seit März 2026): World-Model-Orchestrierung — jedes LLM streamt in jedem Frame Absichten in den Simulationsschritt.

Unity ist das Werkzeug, das Ihre KI in die Hand nimmt. RakuAI ist der Körper, in dem Ihre KI lebt.

Adapter

Der Vertrag sind die 17 nativen Tools. Die Adapter sind die Art, wie Partner sich anbinden.

VeoEnvironmentAdapter Googles Veo
RunwayEnvironmentAdapter Runway
Eigener Adapter Ihr Modell

Der Adaptervertrag ist öffentlich. Die heute erprobten Adapter sind erstparteilich / Referenz; ein breites Drittanbieter-Adapter-Ökosystem ist ein Roadmap-Ziel.

Warum MCP-nativ wichtig ist

  1. Keine individuelle Integration — wenn dein Modell MCP spricht, spricht es RakuAI. In etwa fünf Minuten im Lesemodus verbinden.
  2. Von Grund auf herstellerunabhängig — Claude, ChatGPT, Gemini und Copilot steuern alle dieselben 17 nativen Tools; Parität gilt auf Protokollebene.
  3. Ein versionierter Vertrag — die 17-Tool-Oberfläche ist als tools.v1.json fixiert, mit einem Anti-Drift-Test, damit das, womit du integrierst, sich nicht stillschweigend ändert.
  4. Vertretbare Berechtigungen — Deny-by-Default, audit-protokolliert, schema-validiert, mit sessionbezogenem Audit-Log-Export für deine Sicherheitsprüfung.

Was live ist und was auf der Roadmap steht

Wir kennzeichnen, was ausgeliefert wurde und was noch nicht.

Heute live

  • 17 native MCP-Tools in Produktion seit März 2026
  • Versionierter öffentlicher Tool-Vertrag (tools.v1.json) + Anti-Drift-CI-Test
  • 5-Minuten-Lesezugriffspfad + Integrationsleitfaden pro Anbieter
  • Veröffentlichte, protokollebene herstellerunabhängige Paritätsmatrix
  • Deny-by-Default-Mutation; sessionbezogener Audit-Log-Export
  • Free-vs-Paid-Relay-Rate-Limit & Kontingent-Plumbing
  • Universeller api_call/api_search-Passthrough zu ~9.500 Endpunkten

Roadmap

  • Unabhängig verifizierte Parität pro Anbieter (Matrix-Zellen veröffentlicht, noch nicht durchlaufen)
  • Ein-Klick-Produktionsmutation (heute: explizite, auditierte Gewährung)
  • Granularität pro Connector und signierte Audit-Logs
  • Breites Drittanbieter-Adapter-Ökosystem (heute: erste Partei / Referenz)
  • In-Product-Berechtigungs-Leiter-UI; scoped Berechtigungsprofile
  • Multi-Region-Relay, SSO/SCIM, Latenz-SLOs

Tiefer einsteigen

Wählen Sie einen Pfad.