Notas de engenharia, decisões de arquitetura e os bastidores da equipe RakuAI.
O Raku Capture transforma um escaneamento pelo celular em uma cena 3D na qual uma IA pode trabalhar. A computação por trás disso vem de quatro programas, e cada um removeu um gargalo diferente em uma camada diferente da pilha. Aqui está quem faz o quê.
Junho de 2026 deu à computação espacial um engine de navegador aberto, óculos de AR autônomos de US$ 2.195, e um desafio industrial de splat. Bom. Quanto mais aberta a web espacial fica, mais ela precisa de um runtime governado para a IA que trabalha dentro dela. Aqui está onde a RakuAI se posiciona e como obter o contrato de ferramentas espaciais MCP.
O SAFe e os frameworks de agile em escala foram construídos para previsibilidade. A IA recompensa aprendizado e velocidade de entrega. A IA já comprimiu descoberta e construção — o gargalo agora é a entrega, e é isso que um runtime resolve. O argumento a favor da velocidade de ciclo completo em vez da adoção de frameworks.
Do escaneamento pelo celular a um splat gaussiano 3D até qualquer LLM conduzindo-o como ferramentas sobre MCP multi-fornecedor. O relato honesto de ponta a ponta: o que está em produção hoje, o que está travado por créditos de GPU, e por que o runtime somente-inferência é o fosso competitivo.
Escaneie um cômodo real com seu celular — sem rig, sem marcadores, sem instalação — e obtenha uma reconstrução 3D que seu assistente de IA pode ler, medir, e sobre a qual pode raciocinar via MCP. Treinamento de splat por GPU chegando em dias. Esta é a história do Raku Capture.
O runtime que seu assistente de IA habita quando precisa construir, consultar ou simular um mundo espacial. Cinco patentes remontando a 2012. Construído para o envelope térmico de óculos. Multi-fornecedor por design. Aqui está o porquê.
O runtime fala Model Context Protocol desde o fim de março. Começou com seis ferramentas sobre transporte stdio, permissões negadas por padrão, log de auditoria completo — e desde então cresceu para 17 ferramentas MCP nativas. O servidor é a fronteira que qualquer agente externo usa para conduzir o engine. Este post é o retrato das seis ferramentas e o que a próxima camada de adaptadores reais e integrações com parceiros vai destravar. Este é o runtime MCP sobre o qual os fabricantes de LLM constroem.
Uma sequência de commits de limpeza que parecem nada glamorosos no diff e se sentem transformadores no projeto. Dezoito DLLs verdes no Linux. Todo chamador de LLM protegido contra comprimento de prompt descontrolado. O namespace /api/v2/ renomeado para /api/raku/ em todo lugar em que aparece. Segurança contra ponteiro nulo varrida por todo o runtime. O build finalmente é algo com que você pode parar de discutir.
O final de março de 2026 foi a véspera do lançamento da GDC e um empurrão de duas plataformas mobile que caiu na mesma semana. Aqui está o que foi entregue, o que quebrou quarenta e oito horas antes de eu embarcar, e quais correções parecem pequenas no diff mas impediram que o demo do laptop desandasse na frente de estranhos. É assim que é, de fato, entregar um runtime espacial na velocidade de uma conferência.
Seis semanas alimentando o Meshy.ai através de um pipeline de ativos de sete estágios ensinaram à equipe três coisas que a documentação da API não conta. Vestimentas longas obscurecem a silhueta de que a estimativa de pose precisa. Nomes de personagens em japonês derrubam qualquer coisa que direcione stdout para um arquivo. E o endpoint de remesh do Meshy pode simplesmente sumir no meio de um sprint. Esta é a realidade nada glamorosa de transformar ativos gerados por IA em conteúdo de nível de produção para um runtime espacial.
Um pico de custo de 15x levou a uma auditoria de todos os lugares onde o runtime conversa com um LLM — e encontrou cinco chamadores que podiam enviar prompts ilimitados sem limite, sem truncamento, sem defesa. No sábado à tarde, todo chamador passou a usar uma proteção compartilhada, com orçamentos por chamada, telemetria e uma verificação de CI que bloqueia regressões. É assim que um runtime espacial torna impossível esquecer a disciplina de comprimento de prompt.
347 funções sem tag em dezoito bibliotecas nativas, escondidas por um padrão de visibilidade de símbolo, quebrando o build do Linux uma referência indefinida de cada vez. Rastreado até a raiz, varrido por completo, e trancado atrás de uma trava de CI que falha qualquer PR que derrube um símbolo público. Linux agora é um alvo de primeira classe — e a base de código está mais honesta em toda plataforma.
Oito testes, um código de erro do Windows, uma DLL de compilador de shader ausente sem a qual o runtime não conseguia inicializar. A correção transformou uma dependência rígida em tempo de carregamento em um fallback gracioso e observável — para que o engine rode em qualquer lugar, não só em uma estação de trabalho de desenvolvedor totalmente equipada. Portabilidade é um recurso pelo qual parceiros pagam.
O time de segurança de um parceiro empresarial rodou due diligence na nossa superfície de API e voltou com oito descobertas críticas e altas. Cada uma teve uma correção integrada até sábado à noite. Aqui estão as categorias, as novas travas de segurança permanentes, e os modos de falha contra os quais um runtime orientado por agentes tem que se defender de propósito.
Cinco agentes, cinco branches, uma base de código, um fim de semana: 112 commits. O gargalo não é mais digitar — é decidir quais quatro problemas valem quatro tentativas paralelas, e quais dois resultados são bons o suficiente para manter. O trabalho deixou de ser IC sênior e virou tech lead de um time que nunca dorme.
Claude escreveu oito PRs de subsistema. O Gemini os revisou e deixou trinta e seis comentários — dois dos quais eram bugs reais de segurança de thread que teriam sido entregues. Este é o padrão de revisão multi-fornecedor mostrando seu valor: modelo diferente, pontos cegos diferentes, código mais difícil de enganar. O sinal de disciplina que parceiros sérios deveriam perguntar a todo time de engine.
Sua experiência é um arquivo, não um binário. O formato .raku é JSON — versionado por schema, comparável por diff, recarregável a quente, com ganchos explícitos onde a IA do runtime se conecta a cada quadro. Aqui está como é um exemplar real, por que JSON vence uma DSL personalizada, e como 'design de jogo revisado em um pull request' se tornou nosso fluxo de trabalho de verdade.
Sete placeholders O(N²), um sábado, e os algoritmos de produção que transformaram uma demo tremida em um runtime que voa. É assim que o RakuAI transforma código escrito por IA em desempenho de nível de engine — e por que uma auditoria algorítmica é o upgrade mais rápido que sua stack espacial jamais vai ter.
Uma passagem de auditoria profunda revelou duas coisas que eu não gostei: um buscar-e-substituir amplo demais que havia embaralhado silenciosamente identificadores em trezentos arquivos, e um segredo de licenciamento fixo no código em um arquivo-fonte público. Ambos corrigidos em um dia. Este é o guia de campo honesto sobre os modos de falha aos quais uma base de código orientada por agentes está mais exposta — e as travas de segurança que os pegam.
De 54% a 100% em três fins de semana. O executor de testes não se importa com seus sentimentos, sua contagem de estrelas, ou seu roadmap — ele te diz exatamente o quanto do seu runtime espacial realmente funciona. Aqui está como percorremos essa distância, causa raiz por causa raiz, e por que a taxa de aprovação é o sinal mais honesto que um parceiro pode pedir.
Pior do que um crash: uma demo que não travava, não dava erro, e também não funcionava. Entrada morta. Uma cena de placeholder vestindo a fantasia de um jogo terminado. Logs que não diziam nada. Este é o sábado em que fiz o engine se recusar a falhar em silêncio — a disciplina de falha alta, erro localizável por grep, auditoria por adjacência, que mantém um runtime espacial honesto com as pessoas que constroem sobre ele.
Se a IA é um primitivo de runtime dentro do seu engine, você fica preso a qualquer modelo que você conectou? Não — a camada de IA é exposta por meio de interfaces, não de imports. Seis subsistemas, uma API de gerenciamento de modelos, um formato de arquivo que nomeia capacidades em vez de modelos. Aqui está o limite que permite ao RakuAI trocar qualquer modelo, qualquer fornecedor, qualquer caminho de inferência sem tocar em uma linha de código de quem chama — e por que isso importa cada vez mais à medida que o mercado de modelos se agita.
Quatro bugs sem relação entre si, zero subsistemas sobrepostos, um sábado. Gráficos rosa por shader faltando. Uma pontuação que contava em dobro. Um crash duro na inicialização de RX. Uma câmera que se recusava a travar. Este é o tipo de falha de integração que escapa de todo teste unitário - e a disciplina de ordem de inicialização, posse de evento, e guardião de boot que transforma uma demo quebrada em um runtime no qual parceiros podem confiar.
A maioria dos motores que dizem 'nativo de IA' em 2026 quer dizer que penduraram um painel de chat. A RakuAI é construída de forma diferente - IA é uma primitiva de runtime no loop a cada frame, mais perto de um sistema nervoso do que de uma fábrica. Se você ler apenas um texto sobre o que 'nativo de IA' de fato significa na camada de arquitetura, que seja este.
139 commits durante a noite. Dez subsistemas fundamentais lançados ao longo de um fim de semana, principalmente por um agente autônomo rodando contra uma fila que mantenho cheia. Isto é como de fato é quando a fundação de um motor é construída POR agentes, não pendurada PARA eles - e por que essa escolha molda toda decisão arquitetural no runtime que sua IA vai habitar.
Um fim de semana de 276 commits que trouxe o TensorFlow Lite para inferência de SLM no dispositivo, sincronização federada AES-256-GCM, camadas de composição OpenXR, estabilização de âncora com filtro de Kalman, e uma camada de abstração de hardware para o canal óptico. Este é o fim de semana em que a RakuAI deixou de ser um projeto de pesquisa e cresceu a área de superfície de uma plataforma de verdade - os ossos sobre os quais óculos inteligentes e labs de IA constroem.
Duzentos erros, seis categorias, doze PRs, dois dias - e o primeiro build x64 verde na história do runtime. Este é o interior de trazer um motor espacial multiplataforma para o MSVC 2026 Insiders, as seis classes de erro que vão atingir qualquer base de código C++, e as varreduras conduzidas por agentes que as corrigiram. Três plataformas, um runtime, pronto para lançar no Windows.
Quarenta e sete funções alegavam fazer trabalho de verdade. Quarenta e sete estavam retornando placeholders. Este é o sábado em que fui atrás dos stubs que os agentes tinham silenciosamente entregado - e construí a auditoria, os testes, e a disciplina que transforma codificado-por-agente em confiado-por-agente. A honestidade que torna um runtime espacial seguro para se construir em cima.
Três meses depois, o fluxo de trabalho de desenvolvimento se assentou em um ritmo multi-fornecedor: Claude escreve o runtime, Gemini revisa os diffs, ChatGPT serve de rubber-duck para a arquitetura, Copilot autocompleta. A regra mais importante de todas - o modelo que escreve um PR não pode ser o modelo que o revisa. Este é o fluxo de trabalho construindo um runtime nativo de IA, e a postura que o próprio runtime adota em relação a modelos.
Uma aposta real em padrões neste fim de semana. Até o domingo à noite o runtime tinha sua espinha dorsal OpenXR - binding de gráficos, ciclo de vida de frame, sincronização de ação - além de um gerenciador de link de RF/óptico de modo duplo que troca de rádios em tempo real sem que o app nunca perceba. Adote o padrão onde ele existe; construa onde não existe; esteja pronto para adotar de novo quando ele alcançar.
O fim de semana em que o motor aprendeu a receber direção de qualquer LLM em nuvem - como uma preocupação de runtime, não um painel de chat. Até o domingo o XRAssistantService transmitia a intenção do modelo através do pipeline de voz, foveação por rastreamento ocular foi lançada, e renderização descarregada por Wi-Fi 7 tinha um host de verdade. O ChatGPT consegue dirigi-lo. O Claude consegue dirigi-lo. O Gemini consegue dirigi-lo. Esse é todo o ponto.
Meta Quest agora é um alvo da Raku. OpenXR no Horizon OS, RA por passthrough com camadas de composição, renderização estéreo e rastreamento 6DoF - o motor agora alcança uma das maiores bases instaladas em computação espacial. Encontre seus usuários no hardware que já possuem, depois leve a mesma experiência para os óculos de graça.
O nome provisório finalmente saiu. Em um fim de semana, agentes varreram toda referência em todo repositório de Blade e ar1-runtime para Raku - sem quebrar o build, sem quebrar compatibilidade. O nome significa facilidade, conforto e o toque humano. A engenharia finalmente alcançou a marca que estava esperando por ela.
Dois meses de um diário público de engenharia, anos de trabalho debaixo do capô. Um sábado tranquilo para fazer um balanço: um runtime de RA em C++ multiplataforma com IA embutida na etapa de simulação, uma arquitetura que se assentou, e um marco de prontidão de produção em dezembro à vista. É assim que um runtime espacial nativo de IA se parece quando deixa de ser uma declaração de missão e vira um repositório.
Trinta e sete commits em vez de oitenta — de propósito. Cortei a fila de agentes e desacelerei o ritmo para conseguir de fato ler o que estava entrando, e a base de código saiu mais limpa por causa disso. Aqui está a disciplina que mantém um runtime construído por agentes coerente em vez de uma pilha de PRs limpos apenas isoladamente.
Um alvo de precisão brutal vindo de uma conversa com parceiro: desvio de overlay sub-milimétrico sobre uma folha de papel de caligrafia. Até o sábado à noite o runtime tinha uma API de pose de âncora sub-milimétrica, rastreamento de ponta de caneta em tempo real, e detecção de papel baseada em marcador. Este é o tipo de precisão que transforma a RA de um brinquedo em um tutor.
Mude o alvo do produto de AR1+ para AR2 Gen1, depois lance o harness de validação térmica, estabilidade Wi-Fi 7, e bring-up de sensores para um hardware que ainda não está na mesa. Quando o silício chegar, a validação começa no dia um em vez do dia noventa. É assim que a RakuAI lança no seu hardware mais rápido que seus concorrentes - a parte cara já está paga.
Todo projeto multi-repositório morre da mesma forma - um repositório dispara na frente, o outro apodrece silenciosamente. Este sábado conectou Unity e Unreal HelloAR para se comportarem de forma idêntica e construiu o gate de teste de paridade que torna a lacuna impossível. Esta é a disciplina que mantém um runtime espacial e seus bindings coerentes por anos, para que sua escolha de binding nunca te tranque fora de uma funcionalidade.
Dois dias no teclado, agentes autônomos moendo a fila de issues por baixo, e 282 commits no repositório do runtime até o domingo à noite. O loop principal, o rastreador de latência, a API C que permite ao SDK se conectar - eis o que foi lançado, o que quebrou, e como é o loop conduzido por agentes quando finalmente encaixa. É isso que significa potencializar um time de runtime de um único humano.
Dia zero do diário público: repositórios no ar, agentes trabalhando, e uma especificação de óculos inteligentes na mesa como a função forçadora para toda decisão rio abaixo. A aposta é simples - as experiências de IA mais interessantes são espaciais, ancoradas nos lugares reais em que você está. Este é o motor sendo construído explicitamente para receber direção do seu modelo, a cada frame.
O último sábado antes de os repositórios abrirem - três meses de trabalho de design por trás. Escalação de agentes fechada. Conjunto de demos especificado. Estrutura de pastas do SDK desenhada. Superfície de API rascunhada. Um portfólio de patentes de uma década pronto para ser a fundação. É assim que é projetar um runtime espacial para caber no seu time antes de uma única linha ser lançada.
A estrutura de pastas é o organograma do código - acerte cedo e todo PR pelos próximos dois anos cai no lugar certo. Este sábado desenhou o esqueleto do SDK antes de existir qualquer código: /apps, /modules, /assets, /docs, /config, além de stubs de módulo que travam os contratos sobre os quais seus agentes constroem. Esta é a disciplina que mantém um runtime espacial construído por IA coerente por anos.
Oito demos canônicas que provam para que serve um runtime espacial - arena multiplayer, coaching em RA, designer de HUD, modo streamer, overlay de ponto de serviço, HUD companheiro, treinador de mira, sincronização de HUD multiplayer. Zero código escrito, todas especificadas. As demos são a especificação, e é assim que a RakuAI mostra o que sua IA pode fazer quando passa a habitar o mundo real.
Antes de existir uma única linha do runtime espacial, este sábado mapeou a frota de agentes que o construiria. Produto, SDK, Studio, Marketing, Operações, estratégia de IA, mais uma camada de governança vigiando os vigilantes. É assim que você potencializa um time de um único humano até virar uma empresa de motor que entrega produto - os agentes vêm antes da arquitetura porque os agentes moldam a arquitetura.