O RakuAI transforma qualquer coisa que sua câmera vê numa cena conversável — uma captura Gaussian Splat, um visualizador ao vivo e uma superfície MCP que seu assistente de IA pode percorrer, medir e modificar.
Membro doReal hoje: escaneamento por telefone na entrada, splat arrastável na saída, runtime MCP ao vivo. Em breve nesta página: o visualizador de splat interativo acima (placeholder honesto — ainda não entregue).
O Capture é uma experiência de telefone. Aponte sua câmera para este QR Code para abrir o web app Raku Capture e, então, escaneie um espaço real.
Ou abra direto: rakuai.com/capture-app/
O Raku Capture é construído por um membro do NVIDIA Inception. Estamos trazendo o 3D Gaussian Splatting acelerado pela NVIDIA (o trainer Brush em A10G / L40S) para a etapa de reconstrução, para que um escaneamento de telefone de qualquer cômodo vire um splat explorável em minutos, aproveitando o catálogo NGC e os créditos cloud do programa. Leia o anúncio →
Três trabalhos, um pipeline. A realidade entra como vídeo. Sai um mundo espacial. Então seu assistente de IA vive dentro dele pelo MCP — ele lê a cena, nunca reescreve seu cômodo em silêncio.
Aponte uma câmera para um espaço e se mova nele. Um telefone basta. Sem rig, sem marcadores, sem cabine. É aqui que lideramos, porque essa parte precisa ser honesta antes que qualquer outra coisa seja interessante.
Os frames viram um Gaussian Splat com geometria e escala reais — uma cena que você pode orbitar, medir e ancorar. O runtime mantém a autoridade sobre física, colisão e transformações.
Seu assistente de IA conecta pelo mesmo contrato MCP que a engine já expõe — 17 ferramentas nativas (5 somente leitura + 12 de mutação) mais passthrough universal api_call/api_search. Ele pode ver a cena, medir distâncias, simular mudanças e agir — dentro das permissões que você definir, cada chamada auditada. O MCP está em todos os planos — não é pago à parte.
Enquadramento honesto: o caso de uso principal está rumo ao acesso antecipado agora. Os outros mostram aonde isso vai — rotulados para você saber o que é real hoje versus o que está no roadmap.
Escaneie um cômodo. Depois pergunte ao seu assistente sobre o espaço real à sua frente — "esse sofá cabe nessa parede?", "a janela está a que distância da mesa?". Ele responde com base na cena medida, não num chute.
Um espaço capturado pode virar uma fase, um cenário ou um set jogável dentro do runtime RakuAI. Não estamos prometendo prompt-para-jogo. Estamos dizendo que um escaneamento real é uma peça real e reutilizável de um.
Em óculos, a captura vira um gêmeo espacial persistente que seu assistente compartilha com você — ancorado, com precisão submilimétrica, feito para o envelope térmico para o qual o runtime foi projetado.
O arco mais longo é captura contínua: o mundo atualiza enquanto você se move e o assistente raciocina sobre ele ao vivo via ingest_frame. Hoje esse caminho está validado com stubs. Vamos falar assim até ele ser entregue de ponta a ponta.
Mídia conceitual abaixo. Estas são as demos na fila, descritas com franqueza — placeholders, não filmagem encenada vestida de produto.
Um único clipe sem corte: alguém anda com um telefone por um cômodo por uns vinte segundos e aparece um Gaussian Splat arrastável daquele cômodo. Sem cortes escondendo o trabalho. Capture é a afirmação, então Capture é o que mostramos.
O mesmo escaneamento, agora conectado a um assistente pelo MCP. Pedimos para ele medir um vão, conferir um encaixe e descrever o que tem numa prateleira — e ele responde a partir da cena capturada. O ponto é o assistente raciocinando sobre o seu espaço, não um padrão.
Qualquer modelo que fale Model Context Protocol pode conduzir uma cena conversável. Funciona com Claude, ChatGPT, Gemini e GitHub Copilot hoje — em todos os planos, sem paywall, sem configuração extra além de colar um bloco de configuração. O servidor MCP expõe 17 ferramentas nativas (5 somente leitura + 12 de mutação) mais passthrough universal api_call/api_search.