RakuAI 是 OEM 選擇授權而非自建的 LLM 廠商中立空間執行階段。第 1 階段灘頭陣地:Meta Ray-Ban Display PWA — 從眼鏡瀏覽器即可安裝的 Web 應用、Claude·ChatGPT·Gemini·Copilot 都能驅動的 MCP 表面,以及為頭戴式顯示調校的散熱/延遲預算。第 2 階段路線圖:Android XR + 原生 SDK(2026 年第三季–2027 年)。我們不與你的硬體競爭 — 我們讓其上的 AI 體驗更快上線。
為 2026–2027 年發布眼鏡的 Meta、Samsung、Google、Xreal、Rokid 等公司的工程與合作負責人撰寫。對已上線、僅供參考、以及受硬體限制的內容如實說明。未宣稱任何已簽約 OEM 合作夥伴。
RakuAI 能力對應到 2026 窗口期內最重要的三個平台。✅ 已交付。🟡 部分 / 已標記。⏳ 在平台路線圖上。❌ 目前無路徑。受硬體限制 = 取決於 OEM 是否暴露我們無法控制的相機/影格 API。未宣稱任何已簽約 OEM 合作。註腳見下。
| 能力 | Meta Ray-Ban Display 已交付 |
Android XR(Samsung 及合作夥伴) 2026 年第三季發布窗口 |
Apple Vision Pro 待定 |
|---|---|---|---|
| 從裝置進入 PWA 可安裝 Web 應用RakuAI 以可安裝 PWA 形式發佈 — 無應用商店門檻。 | ✅Meta AI 眼鏡上的可啟動 Web 應用路徑1 | ✅Android XR 上的 Chrome 支援 PWA2 | ❌visionOS 路由到原生;我們提供 WebXR 回退3 |
| MCP 伺服器存取(Claude / ChatGPT / Gemini 驅動執行階段)面向桌面 AI 助理的 HTTPS + stdio 託管 MCP。 | ✅經由配套手機 / 雲端 MCP | ✅端側 Gemini 或雲端 MCP 皆可 | 🟡雲端 MCP 可用;端側路徑為路線圖 |
| 從眼鏡擷取流程(掃描空間,交給 LLM)原始影格 + IMU → 雲端重建 → 數分鐘內得到可探索的 splat。 | 🟡目前經由配套手機擷取4 | ⏳平台發布時從眼鏡直接擷取 | ⏳等待相機存取表面 |
| 即時場景查詢(問“廚房裡有什麼?”,得到結構化答案)重建場景之上的空間查詢層;今日交付。 | ✅擷取後;即時場景查詢為路線圖 | ✅與目前 Meta 同一路徑 | ✅經由 WebXR + 雲端 MCP |
| 多 LLM 驅動(Claude、ChatGPT、Gemini、Copilot)廠商中立 — LLM 的選擇屬於使用者,而非平台。 | ✅目前四者皆驅動 RakuAI MCP | ✅四者皆可;Gemini 獲得一流端側支援 | ✅發布時僅雲端 |
市場進入按平台就緒度分階段 — 而非按 RakuAI 的時間表。我們在你的裝置已暴露的公開表面上與之相遇,待你準備好後再深化整合。
Meta Ray-Ban Display PWA · 目標 2026 年第三季
Android XR + 原生 SDK · 2027 年
Xreal / Rokid / Galaxy XR / Vision Pro · 2027 年+
NVIDIA Inception 網路:RakuAI 已加入 NVIDIA Inception(2026 年 5 月)。該網路提供向 XR 硬體生態的友好引薦 — 許多眼鏡 OEM 及其晶片/光學供應商都是 Inception 成員或 NVIDIA 合作夥伴。
滑動瀏覽從初次對話到共同發布體驗的路徑。無 SDK 鎖定 — 我們在你的裝置已暴露的公開 Web 表面上與之相遇。
眼鏡上的 LLM 透過 PWA 與 RakuAI 的 MCP 表面對話 — 經由到配套裝置的 stdio 橋,或經由 HTTPS 到託管 MCP。執行階段以空間原語作答:錨點、姿態、場景查詢、splat 控制代碼。
兩端都是真實且已上線的。生產 MCP 伺服器暴露 17 個原生工具(5 個唯讀 + 12 個變更)— 完整清單見 spatial-engine.html。其中與眼鏡相關的約 12 個劃分為:6 個核心擷取/場景工具(在 MCP 頁面有文件),以及 6 個 xr_ 轉接器工具(面向眼鏡驅動流程的工作階段、頭部姿態、輸入和錨點原語)。託管 MCP 執行在 East US 的 Azure Container Apps 上。
三欄,三條時間線。我們不承諾無法交付的內容,並標記出依賴於我們無法控制的平台行為的部分。
生產 · 2026 年 5 月
rakuai.com/capture-app/ 上的可安裝 PWAxr_ 轉接器工具(工作階段、頭部姿態、輸入、錨點)對齊 Android XR 發布
取決於平台表面
我們不會承諾:任何特定 OEM 會預裝我們的 PWA、任何特定 LLM 廠商會預設經由我們路由,或我們無法控制的相機 API 會按我們期望的時間表出現。我們針對公開表面進行設計,並讓平台來決定。
五項已授權美國專利,優先權日 2012 年 7 月,資產有效期至 2032 年 7 月。本頁描述的架構正是這些專利所預見的架構。
這些專利早於 Meta Ray-Bans(2021)、Xreal Air(2022)、Meta Ray-Ban Display(2024–25)和 Android XR(2026)。對於希望在架構級請求項上獲得清晰前進路徑的 OEM,我們在合作之外還提供授權。
來自一個從第一天起就針對眼鏡約束集進行工程設計的執行階段的實測資料。這些不是平台宣稱 — 而是 RakuAI 自身所設定與觀測的數字。
2012 年專利所預見的分工 — 如今是唯一能在眼鏡散熱範圍內交付的架構。
物理(60 Hz 固定)、AI 行為、遊戲狀態、資產串流。
本地姿態預測、注視點算繪、IMU + 視覺里程計。
透過 Wi-Fi 7 傳輸場景增量(可用時帶光學回退)、感測器上行,無需影片串流。
盡可能符合 OpenXR。必要時使用廠商擴充。可用時走 PWA 路徑。
選擇與你團隊風險偏好相符的通道。三者都從我們的聯絡表單開始。我們的首次回覆會保持簡短且具技術性。
你正在篩選執行階段合作夥伴,希望就 RakuAI 如何對應到你的特定裝置、作業系統和 2026 年發布里程碑獲得書面答覆。把你的平台約束發給我們 — 我們會答覆:今天什麼是真實的、什麼處於受硬體限制的路徑上,以及面向你裝置的 1–2 個開發週的 Tier 1 Web 應用試點會是什麼樣。
工程級簡報,涵蓋:PWA 入口表面、MCP 傳輸(stdio + HTTPS)、擷取流程 API、權限模型,以及我們為 Tier 2 原生 SDK 整合建議的 OEM 側掛鉤。公開文件尚在草稿中 — 請索取,我們會連同第 2 階段 SDK 整合路徑(目標 2026 年第四季,8–12 個開發週)一併直接發送目前版本。
透過雙向 NDA 存取 xr_ 轉接器工具、眼鏡擷取預覽、WebGPU splat 管線,以及第 2 階段原生 SDK 路線圖文件。Tier 3 保留給一家承諾投入旗艦裝置的標竿發布合作夥伴。名額有限 — NVIDIA Inception 關係將獲優先考量。
OEM 合作夥伴在首次通話前最常閱讀的頁面 — 外加上方的階段路線圖。
RakuAI 是 NVIDIA Inception 成員。我們在 Raku Capture 中交付的同一套 NVIDIA 加速 3D 高斯潑濺堆疊,正是驅動上述眼鏡掃描流程的技術。了解更多 →
NVIDIA Inception 是面向 AI 新創企業的免費計畫;RakuAI 的成員資格並不意味著 NVIDIA 認可 RakuAI 的產品。詳情請見 nvidia.com/startups。