5 patentes | Más de 9.500 endpoints de API | 18 DLL nativas | El motor de juego espacial nativo de IA — Ahora en acceso anticipado
Para líderes técnicos de OEM de gafas inteligentes

El runtime espacial que los OEM de gafas inteligentes licencian—no construyen.

RakuAI es un runtime espacial neutral respecto a proveedores de LLM que los OEM licencian en lugar de construir. Plataforma de Fase 1: PWA de Meta Ray-Ban Display — una aplicación web instalable desde el navegador de las gafas, una superficie MCP que Claude, ChatGPT, Gemini o Copilot pueden controlar, y un presupuesto térmico y de latencia ajustado para pantallas montadas en la cabeza. Hoja de ruta Fase 2: Android XR + SDK nativo (T3 2026–2027). No competimos con tu hardware — hacemos que las experiencias de IA en él se lancen antes.

Escrito para líderes de ingeniería y alianzas en Meta, Samsung, Google, Xreal, Rokid y otros que lanzan gafas en 2026–2027. Honesto sobre lo que está en producción, lo que es solo referencia y lo que depende del hardware. No se afirma ningún OEM socio firmado.

Miembro de NVIDIA Inception AWS Activate Microsoft for Startups Leer más ↓
Iniciar una asociación OEM → Ver la hoja de ruta de fases OEM ↓
Superposición espacial impulsada por MCP en gafas inteligentes Una cabeza con gafas inteligentes y una superposición de pantalla de realidad aumentada. Las gafas muestran un HUD de capacidades impulsado por MCP que ancla respuestas en el espacio real del usuario: un marcador de anclaje etiquetado "llaves", un resultado de consulta de escena y una insignia de llamada a herramienta MCP, ilustrando cómo un LLM controla el runtime de RakuAI desde las gafas. HUD de capacidades Impulsado por MCP · anclado al mundo scene_query("dónde están mis llaves") Anclaje: isla de cocina a la izquierda del frutero · 0,6 mm respuesta en voz a través de las gafas

Lo que está disponible por plataforma, hoy.

Mapeamos las capacidades de RakuAI a las tres plataformas que importan para las gafas en la ventana de 2026. ✅ disponible. 🟡 parcial / detrás de un flag. ⏳ en la hoja de ruta de la plataforma. ❌ sin camino actual. Notas al pie debajo de la tabla.

Capacidad Meta Ray-Ban Display
Disponible		 Android XR (Samsung y socios)
Ventana de lanzamiento 3T 2026		 Apple Vision Pro
Por determinar
Acceso a la aplicación web instalable como PWA desde el dispositivoRakuAI se distribuye como una PWA instalable — sin restricciones de tienda de aplicaciones. ✅Camino de aplicación web ejecutable en las gafas Meta AI1 ✅Chrome en Android XR admite PWA2 ❌visionOS dirige a nativo; ofrecemos una alternativa WebXR3
Acceso al servidor MCP (Claude / ChatGPT / Gemini controlan el runtime)MCP alojado sobre HTTPS + stdio para asistentes de IA de escritorio. ✅mediante el teléfono complementario / MCP en la nube ✅funcionan tanto Gemini en el dispositivo como el MCP en la nube 🟡el MCP en la nube funciona; el camino en el dispositivo es hoja de ruta
Flujo de captura desde las gafas (escanea un espacio y entrégaselo al LLM)Fotogramas en bruto + IMU → reconstrucción en la nube → splat explorable en minutos. 🟡captura mediante el teléfono complementario hoy4 ⏳directo desde las gafas en el lanzamiento de la plataforma ⏳a la espera de una superficie de acceso a la cámara
Consulta de escena en tiempo real (pregunta “¿qué hay en la cocina?” y obtén una respuesta estructurada)Capa de consulta espacial sobre la escena reconstruida; disponible hoy. ✅tras la captura; consulta de escena en vivo en hoja de ruta ✅mismo camino que Meta hoy ✅sobre WebXR + MCP en la nube
Controlador multi-LLM (Claude, ChatGPT, Gemini, Copilot)Neutral respecto al proveedor — la elección del LLM es del usuario, no de la plataforma. ✅los cuatro controlan el MCP de RakuAI hoy ✅los cuatro; Gemini obtiene soporte de primera clase en el dispositivo ✅solo en la nube en el lanzamiento
  1. Según el material público de lanzamiento de Meta Ray-Ban Display: el dispositivo admite aplicaciones web instalables desde la superficie web de las gafas. No hemos firmado una alianza con Meta ni la reivindicamos — somos compatibles con el punto de entrada público de aplicaciones web.
  2. Android XR sigue el camino estándar de instalación de PWA de Chrome. No hemos firmado una alianza con Samsung ni con Google.
  3. visionOS no expone actualmente un camino de PWA instalable equivalente al de las gafas. Nuestro plan para visionOS es WebXR + una carcasa nativa independiente como continuación.
  4. “Captura desde las gafas hoy” significa: el usuario lleva las Ray-Ban Display, el teléfono complementario ejecuta nuestra PWA y el teléfono es la fuente de verdad de la cámara. La captura directa de fotogramas desde las gafas llegará cuando el OEM exponga la API de fotogramas.

Tres fases. Un modelo de licencia.

La estrategia de entrada al mercado se escalona según la madurez de la plataforma — no según el calendario de RakuAI. Nos adaptamos a las superficies públicas que tu dispositivo ya expone y profundizamos la integración cuando estás listo.

Fase 1 — Plataforma inicial

PWA de Meta Ray-Ban Display · objetivo T3 2026

  • Entrada: PWA instalable desde el navegador integrado de las gafas — sin restricciones de tienda de aplicaciones, sin instalación de SDK en tu dispositivo
  • Superficie MCP: 17 herramientas nativas + 6 herramientas universales de passthrough, en vivo para Claude, ChatGPT, Gemini, Copilot
  • Captura: teléfono complementario como cámara hoy; captura directa desde las gafas cuando llegue la API de frames del OEM (depende del hardware)
  • Arquitectura: teléfono como cómputo (el teléfono ejecuta IA/física, las gafas muestran + rastrean)
  • Etiqueta honesta: la vía PWA está lista como referencia; no hay co-marketing ni preinstalación acordados con Meta

Fase 2 — Plataforma

Android XR + SDK nativo · 2027

  • Entrada: la misma vía PWA se generaliza en la superficie Chrome estandarizada de Android XR
  • SDK nativo: raku-runtime como DLLs nativas con una capa de sesión compatible con OpenXR — integrada en el compositor del OEM, el pipeline de seguimiento de manos o el controlador de pantalla
  • Objetivo de documentación SDK: docs de grado partner Q4 2026; ruta de integración de 8–12 semanas de desarrollo
  • Socios: Samsung Galaxy XR + licenciatarios Android XR; Xreal, Rokid, Vision Pro browser con la misma oferta escalonada
  • Etiqueta honesta: ventana de lanzamiento de Android XR sujeta al calendario de la plataforma; sin OEM firmado

Fase 3 — Expansión

Xreal / Rokid / Galaxy XR / Vision Pro · 2027+

  • Soporte de dispositivos de larga cola a través de la vía del navegador
  • Resiliencia ante conectividad intermitente para gafas de menores especificaciones
  • Pipeline repetible de autocualificación → piloto PWA → SDK
  • App de lanzamiento co-comercializada para un socio estratégico de Nivel 3
  • Presentaciones cálidas de NVIDIA Inception al ecosistema BD de OEM de XR

Red NVIDIA Inception: RakuAI fue aceptado en NVIDIA Inception (mayo 2026). Esa red proporciona presentaciones cálidas al ecosistema de hardware XR — muchos OEM de gafas y sus proveedores de silicio/óptica son miembros de Inception o socios de NVIDIA.

Integración OEM, paso a paso.

Desliza por el camino desde la primera conversación hasta una experiencia de lanzamiento conjunta. Sin lock-in de SDK — nos adaptamos a las superficies web públicas que tu dispositivo ya expone.

MCP desde las gafas, en un solo diagrama.

Un LLM en las gafas se comunica con la superficie MCP de RakuAI a través de la PWA — ya sea mediante un puente stdio al dispositivo complementario o sobre HTTPS al MCP alojado. El runtime responde en primitivas espaciales: anclajes, poses, consultas de escena y manejadores de splat.

Diagrama de arquitectura de MCP desde las gafas Un LLM en las gafas envía una solicitud MCP a través de la PWA instalable al runtime de RakuAI; el runtime expone 17 herramientas MCP nativas (5 de solo lectura + 12 de mutación) en el servidor de producción, de las cuales ~12 son relevantes para las gafas (6 herramientas básicas de captura/escena más 6 herramientas adaptadoras xr_), razona espacialmente sobre la escena capturada y devuelve una respuesta estructurada que el asistente pronuncia de vuelta en las gafas. Gafas inteligentes LLM en las gafas / asistente en el dispositivo "¿Dónde dejé mis llaves?" … respuesta de voz … "En la isla de la cocina, a la izquierda del frutero." PWA instalable rakuai.com/capture-app/ Cámara + IMU + audio WebXR / WebGPU stdio MCP bridge JWT → hosted MCP stdio | https solicitud / respuesta eventos en streaming flujo de token de conexión RakuAI MCP 6 básicas + 6 adaptadoras xr_(de 17 herramientas MCP nativas) · capture_create · capture_status · scene_query · scene_describe · capture_list · capture_open · xr_get_session · xr_set_head_pose · xr_simulate_input · xr_create_anchor · xr_list_anchors · xr_remove_anchor raku-runtime Motor C++ Razonamiento espacial Almacén de splat / malla Anclajes + poses Permisos y alcance ~9.500 endpoints de API 18 DLL nativas respuesta estructurada { object_id, pose,   confidence } Flujo de solicitud MCP — funciona igual tanto si el LLM reside en el dispositivo, en la nube o en un equipo de escritorio que controla las gafas.

Ambas mitades son reales y están disponibles. El servidor MCP de producción expone 17 herramientas nativas (5 de solo lectura + 12 de mutación) — consulta spatial-engine.html para el inventario completo. Las ~12 relevantes para las gafas se dividen en: 6 herramientas básicas de captura/escena (documentadas en la página de MCP) y 6 herramientas adaptadoras xr_ (sesión, pose de la cabeza, entrada y primitivas de anclaje para flujos controlados por las gafas). El MCP alojado se ejecuta en Azure Container Apps en East US.

Hoja de ruta, con honestidad.

Tres columnas, tres cronogramas. No prometemos lo que no podemos entregar y señalamos lo que depende de un comportamiento de la plataforma que no controlamos.

Disponible ahora

Producción · mayo de 2026

  • PWA instalable en rakuai.com/capture-app/
  • Captura → reconstrucción en la nube (GLOMAP + Brush, salida .spz)
  • 17 herramientas MCP nativas (5 de solo lectura + 12 de mutación) activas para Claude, ChatGPT, Gemini y Copilot — consulta spatial-engine.html para el inventario completo
  • 6 herramientas adaptadoras xr_ (sesión, pose de la cabeza, entrada, anclajes)
  • Capa de consulta espacial sobre escenas reconstruidas
  • Cuentas multiinquilino, autenticación JWT, MCP alojado en Azure

Ventana de lanzamiento 3T 2026

Alineado con el lanzamiento de Android XR

  • Captura desde las gafas (fuente de fotogramas = cámara de Ray-Ban Display / Android XR)
  • Entrenamiento de splat en el cliente con WebGPU (camino sin ida y vuelta a la nube)
  • Consulta de escena en vivo durante la captura (no solo tras la captura)
  • Vista previa del SDK para OEM bajo NDA
  • Reconstrucción en GPU sobre NVIDIA A10 / G5 / H100 (créditos en camino)

2027

Sujeto a las superficies de las plataformas

  • Carcasa nativa de visionOS (alternativa WebXR hasta entonces)
  • SLM en el dispositivo para envolventes de cómputo de clase gafas
  • Programa de licencias de patentes para los OEM que lo deseen
  • Aplicación de lanzamiento comercializada conjuntamente con uno o más socios OEM
  • Sim-to-real en tiempo real para robótica + flujos de trabajo de gafas agénticas

Lo que no prometemos: que ningún OEM concreto preinstale nuestra PWA, que ningún proveedor de LLM concreto enrute a través de nosotros de forma predeterminada, ni que las API de cámara que no controlamos existan en el cronograma que queremos. Diseñamos para las superficies públicas y dejamos que las plataformas decidan.

El patrimonio de PI detrás del runtime.

Cinco patentes estadounidenses concedidas, prioridad de julio de 2012, patrimonio vigente hasta julio de 2032. La arquitectura que describe esta página es la arquitectura que esas patentes predijeron.

Qué cubren las reivindicaciones

  • Comunicación inalámbrica de doble modo (baja latencia + alto ancho de banda)
  • Arquitectura de gafas inteligentes + teléfono/host de cómputo
  • Descarga de renderizado del host de cómputo a las gafas
  • Sincronización del estado del mundo multijugador
  • Streaming del mundo (entrega de deltas de escena, no vídeo)

Estas patentes son anteriores a las Meta Ray-Ban (2021), las Xreal Air (2022), las Meta Ray-Ban Display (2024–25) y Android XR (2026). Para los OEM que quieran un camino claro hacia adelante en reivindicaciones a nivel de arquitectura, ofrecemos licencias junto con la alianza.

Cronograma del patrimonio de patentes: prioridad de julio de 2012, concesiones de 2015 a 2018, con la industria lanzando gafas de RA a partir de 2021, y el patrimonio vigente hasta julio de 2032. 2012 prioridad 2015–18 5 patentes concedidas 2021–26 la industria lanza gafas de RA 2032 patrimonio vigente hasta

Pruebas de ingeniería.

Cifras medidas de un runtime diseñado contra el conjunto de restricciones de las gafas desde el primer día. No son afirmaciones sobre las plataformas — son los objetivos que RakuAI se fija y los valores que observa.

18 ms
latencia motion-to-photon
0.5–0.8 mm
precisión de posición a 40 cm
0.3 mm
jitter de pose (filtrado de Kalman)
90 Hz
tasa de renderizado de las gafas
60 Hz
tasa de física del teléfono
~20 Hz / 400–1400 B
sincronización de deltas de escena (no vídeo)
3 modos térmicos
Rendimiento / Equilibrado / Bajo consumo
esqueleto de 71 articulaciones
seguimiento de cuerpo completo
2–4×
ganancia de rendimiento del foveated rendering

Arquitectura de teléfono como unidad de cómputo.

La división que predijeron las patentes de 2012 — ahora la única arquitectura que se lanza dentro de la envolvente térmica de las gafas.

Arquitectura de teléfono como unidad de cómputo: el teléfono ejecuta la física, la IA, el estado del juego y el streaming de recursos, enlazado con las gafas mediante deltas de escena por Wi-Fi 7 con alternativa óptica, mientras que las gafas se encargan del renderizado, la predicción de pose y la odometría visual. Teléfono — cómputo Física — 60 Hz fijo Comportamiento de IA y estado del juego Streaming de recursos Orquestación del modelo del mundo Gafas — pantalla Renderizado — 90 Hz Predicción de pose Foveated rendering IMU + odometría visual delta de escena ~20 Hz Wi-Fi 7 · alternativa óptica enlace de subida de sensores sin streaming de vídeo

El teléfono ejecuta el mundo

Física (60 Hz fijo), comportamiento de IA, estado del juego, streaming de recursos.

Las gafas muestran el mundo

Predicción de pose local, foveated rendering, IMU + odometría visual.

El enlace hace el resto

Deltas de escena por Wi-Fi 7 (con alternativa óptica cuando está disponible), enlace de subida de sensores, sin necesidad de streaming de vídeo.

Compatibilidad de dispositivos hoy.

Conforme a OpenXR siempre que sea posible. Extensiones de proveedor cuando se requieran. Camino PWA donde esté disponible.

Meta Quest 3
Meta Ray-Ban Display
Xreal Air / Air 2 / One
Samsung Android XR
MiRZA AR2
Rokid
Apple Vision Pro (WebXR)
Futuros dispositivos conformes a OpenXR

Tres formas concretas de colaborar.

Elige la vía que se ajuste a la situación de tu equipo. Mantendremos breve la primera conversación.

1. Consulta de capacidades

Estás evaluando socios de runtime y quieres una respuesta por escrito sobre cómo RakuAI se ajusta a tu dispositivo, sistema operativo e hitos de lanzamiento de 2026 concretos. Envíanos las restricciones de tu plataforma y te responderemos con lo que es real hoy y lo que necesitaríamos entregar para tu lanzamiento.

Contáctanos →

2. Documento de especificación de integración

Informe a nivel de ingeniería: superficie de entrada PWA, transporte MCP, API del flujo de captura, modelo de permisos y los puntos de enganche del lado del OEM que recomendaríamos. Todavía estamos redactando la versión pública — pídela y te enviaremos la versión actual directamente.

Solicitar la especificación →

El documento público está en borrador — espera una URL /docs/oem-integration-spec.html en un seguimiento.

3. Vista previa del SDK de acceso anticipado

Acceso bajo NDA mutuo a las herramientas adaptadoras xr_, la vista previa de captura desde las gafas y el pipeline de splat en el cliente con WebGPU antes de la ventana de lanzamiento del 3T de 2026. Limitado a un pequeño número de socios OEM.

Iniciar el NDA →

Firmamos NDA mutuos en condiciones estándar; el plazo es de días, no de semanas.

Si quieres profundizar antes de escribirnos.

Las cuatro páginas que más leen los socios antes de una primera llamada.

Motor espacial →
El runtime en C++ — 18 DLL nativas, ~9.500 endpoints de API, la plataforma sobre la que se asienta la superficie MCP.
Servidor MCP →
La superficie MCP de seis herramientas que permite a Claude, ChatGPT, Gemini y Copilot controlar el runtime. En producción desde marzo de 2026.
Por qué RakuAI →
El argumento más amplio a favor de un motor espacial nativo de IA — una sola API para web, nativo y XR.
Blog de ingeniería →
Registro de desarrollo que incluye la entrada sobre el adaptador MCP, el anuncio de NVIDIA Inception y los artículos sobre Raku Capture.
Miembro de NVIDIA Inception

RakuAI es miembro de NVIDIA Inception. El mismo stack de 3D Gaussian splatting acelerado por NVIDIA que ofrecemos en Raku Capture es el que impulsa el flujo de escaneo controlado por las gafas descrito arriba. Leer más →

NVIDIA Inception es un programa gratuito para startups de IA; la membresía de RakuAI no implica que NVIDIA respalde los productos de RakuAI. Más información en nvidia.com/startups.

Desarrollado con AWS Microsoft for Startups

RakuAI está desarrollado en AWS y es participante de AWS Activate. La reconstrucción en producción se ejecuta actualmente en Azure; la capacidad GPU de AWS (G5 / G6e) está en nuestra hoja de ruta, condicionada honestamente hasta que llegue la cuota.

“AWS” y “AWS Activate” son marcas comerciales de Amazon.com, Inc. o sus filiales. La participación de RakuAI no implica que AWS respalde los productos de RakuAI.