RakuAI は、カメラが捉えたあらゆるものを話しかけられるシーンに変えます——ガウシアンスプラットのキャプチャ、ライブビューア、そして AI アシスタントが歩き回り、計測し、変更できる MCP サーフェス。
今日すでに動作:スマートフォンでスキャンを入力し、ドラッグ可能なスプラットを出力、MCP ランタイムがライブ稼働。このページに近日公開:上記のインタラクティブなスプラットビューア(正直なプレースホルダー——まだ未出荷)。
Capture はスマートフォン向けの体験です。カメラをこの QR コードに向けると Raku Capture ウェブアプリが開き、実際の空間をスキャンできます。
直接開くこともできます: rakuai.com/capture-app/
3 つの仕事、1 つのパイプライン。現実が動画として入力され、空間ワールドが出力されます。そして AI アシスタントが MCP 経由でその中に住み込みます——シーンを読み取るだけで、あなたの部屋を黙って書き換えることは決してありません。再構成はスマートフォン・一般消費者グレードで、測量グレードではありません。
空間にカメラを向けて、その周りを歩き回るだけ。スマートフォンで十分です。専用リグもマーカーも撮影ブースも不要。ここが私たちの強みです——他のすべてが面白くなる前に、この部分こそが誠実でなければならないからです。
フレームは、実際のジオメトリとスケールを持つガウシアンスプラットになります——視点を回し、計測し、アンカーを打てるシーンです。物理・衝突・変換の権限はランタイムが保持します。
AI アシスタントは、エンジンがすでに公開している同じ MCP コントラクト——17 のネイティブツール(読み取り専用 5 + ミューテーション 12)と universal api_call/api_search パススルー——を通じて接続します。シーンを見て、距離を計測し、変更をシミュレートし、操作できます——あなたが設定した権限の範囲内で、すべての呼び出しが監査されます。MCP はすべてのプランで利用可能——有料壁なし。
Model Context Protocol を話せるモデルなら、話しかけられるシーンを操作できます。Claude、ChatGPT、Gemini、GitHub Copilot に今日から対応——すべてのプラン、有料壁なし、設定ブロック 1 つを貼り付けるだけ。
MCP サーバーは 17 のネイティブツール(読み取り専用 5 + ミューテーション 12)と universal api_call/api_search パススルーを公開しています。コアのシーンツールは load_world_model、ingest_frame、get_scene_state、set_render_target、start_simulation、get_metrics です。アシスタントはこれらを呼び出して、キャプチャしたシーンをロードし、ライブフレームを取り込み、ジオメトリと状態を読み取り、シミュレーションを実行します——すべての呼び出しはログ記録され、デフォルト拒否です。あなたがコントロールします。
正直に整理します。中心となるユースケースは現在、早期アクセス中です。その他は、この技術が向かう先です——今日すでに実現していることと、ロードマップ上のものを区別できるよう、ラベルを付けています。早期アクセス中は Pro Beta を無料で提供中(月額 $14.99 は正式リリース時の予定価格であり、現在は課金していません)。
部屋をスキャンします。そして、目の前の実際の空間についてアシスタントに質問します——「このソファはあの壁沿いに収まる?」「窓は机からどれくらい離れている?」。アシスタントは推測ではなく、計測されたシーンに基づいて答えます。
キャプチャした空間は、RakuAI ランタイム内でレベル、背景、あるいはプレイ可能なセットピースになり得ます。プロンプトからゲームを丸ごと生成すると約束しているわけではありません。実際のスキャンが、ゲームの本物で再利用可能なパーツになる、ということです。
スマートグラス上では、キャプチャはアシスタントがあなたと共有する永続的な空間ツインになります——アンカー固定され、サブミリメートル精度で、ランタイムが想定して設計された熱設計の枠内で動作します。
より長期的な展望は、連続キャプチャです。動くにつれてワールドが更新され、アシスタントは ingest_frame を通じてそれをライブで推論します。現時点では、この経路はスタブで検証済みです。エンドツーエンドで出荷されるまで、私たちはそう明言し続けます。
以下はコンセプト用のメディアです。これらは制作待ちのデモを率直に説明したもの——プレースホルダーであり、製品に見せかけた演出済み映像ではありません。
カット編集のない 1 本のクリップ。誰かがスマートフォンを持って約 20 秒間部屋を歩き回ると、その部屋のドラッグ可能なガウシアンスプラットが現れます。作業を隠す編集カットはありません。キャプチャこそが主張なので、キャプチャそのものをお見せします。
同じスキャンを、今度は MCP 経由でアシスタントに接続します。隙間を計測し、収まり具合を確認し、棚の上にあるものを説明するよう依頼すると——アシスタントはキャプチャしたシーンに基づいて答えます。重要なのは、アシスタントが既製のものではなくあなた自身の空間について推論している、ということです。
Capture は早期アクセス中です。AI が操作するランタイムはそうではありません——MCP サーバーは今日から稼働中です。スマートフォンで空間をスキャンし、MCP 対応のアシスタント(Claude、ChatGPT、Gemini、または Copilot)を接続して、実際の空間について本物の質問を始めましょう。早期アクセス中は Pro Beta を無料で提供中。