スキャンして、話しかける。

RakuAI は、カメラが捉えたあらゆるものを、AI アシスタントが歩き回り、計測し、変更できるワールドに変えます。

ライブスプラットビューア · このページに近日公開ドラッグして、スキャンしたワールドを見渡そう。ここには、実際にドラッグできるガウシアンスプラットのキャプチャがマウントされます。ビューアを偽装することはありません——レンダラーが出荷され次第、このプレースホルダーは、マウスで視点を回せるインタラクティブな .spz に置き換わります。

現在の Capture は、スマートフォンでスキャンを入力し、ドラッグ可能なスプラットを出力します。AI が操作する MCP ランタイムはすでに稼働中です。

rakuai.com/capture-app/ の Raku Capture ウェブアプリを開く QR コード

スマートフォンでスキャンして始めましょう

Capture はスマートフォン向けの体験です。カメラをこの QR コードに向けると Raku Capture ウェブアプリが開き、実際の空間をスキャンできます。

直接開くこともできます: rakuai.com/capture-app/

自分の空間をスキャンする RakuAI を Claude に接続する

Raku Capture は NVIDIA Inception メンバーが手がけています。NVIDIA アクセラレーションによる 3D ガウシアンスプラット（A10G / L40S 上の Brush トレーナー）を再構成ステップに導入し、スマホで部屋をスキャンするだけで数分で探索可能なスプラットになります。NGC カタログとプログラムのクラウドクレジットを活用しています。発表を見る →

キャプチャ。再構築。住み込む。

3 つの仕事、1 つのパイプライン。現実が動画として入力され、空間ワールドが出力されます。そして AI アシスタントが MCP 経由でその中に住み込みます——シーンを読み取るだけで、あなたの部屋を黙って書き換えることは決してありません。

ステップ 01

キャプチャ

空間にカメラを向けて、その周りを歩き回るだけ。スマートフォンで十分です。専用リグもマーカーも撮影ブースも不要。ここが私たちの強みです——他のすべてが面白くなる前に、この部分こそが誠実でなければならないからです。

ステップ 02

再構築

フレームは、実際のジオメトリとスケールを持つガウシアンスプラットになります——視点を回し、計測し、アンカーを打てるシーンです。物理・衝突・変換の権限はランタイムが保持します。

ステップ 03

住み込む

AI アシスタントは、エンジンがすでに公開している同じ 6 ツールの MCP コントラクトを通じて接続します。シーンを見て、距離を計測し、変更をシミュレートし、操作できます——あなたが設定した権限の範囲内で、すべての呼び出しが監査されます。

話しかけられるワールドで、何をするか

正直に整理します。中心となるユースケースは現在、早期アクセスへ向けて出荷準備中です。その他は、この技術が向かう先です——今日すでに実現していることと、ロードマップ上のものを区別できるよう、ラベルを付けています。

中心 · 早期アクセス中

あなたの空間をスキャンするアシスタント

部屋をスキャンします。そして、目の前の実際の空間についてアシスタントに質問します——「このソファはあの壁沿いに収まる？」「窓は机からどれくらい離れている？」。アシスタントは推測ではなく、計測されたシーンに基づいて答えます。

近い将来

正直に言えば、ゲームの一部

キャプチャした空間は、RakuAI ランタイム内でレベル、背景、あるいはプレイ可能なセットピースになり得ます。プロンプトからゲームを丸ごと生成すると約束しているわけではありません。実際のスキャンが、ゲームの本物で再利用可能なパーツになる、ということです。

より先のフェーズ

スマートグラスのツイン

スマートグラス上では、キャプチャはアシスタントがあなたと共有する永続的な空間ツインになります——アンカー固定され、サブミリメートル精度で、ランタイムが想定して設計された熱設計の枠内で動作します。

より先のフェーズ

リアルタイムビジョン

より長期的な展望は、連続キャプチャです。動くにつれてワールドが更新され、アシスタントは ingest_frame を通じてそれをライブで推論します。現時点では、この経路はスタブで検証済みです。エンドツーエンドで出荷されるまで、私たちはそう明言し続けます。

私たちが目指して構築中の 2 つのデモ

以下はコンセプト用のメディアです。これらは制作待ちのデモを率直に説明したもの——プレースホルダーであり、製品に見せかけた演出済み映像ではありません。

［メディアプレースホルダー — 20 秒のスマートフォン → スプラットクリップ］

20 秒、スマートフォンからスプラットへ

カット編集のない 1 本のクリップ。誰かがスマートフォンを持って約 20 秒間部屋を歩き回ると、その部屋のドラッグ可能なガウシアンスプラットが現れます。作業を隠す編集カットはありません。キャプチャこそが主張なので、キャプチャそのものをお見せします。

［メディアプレースホルダー — 「あなたの実際の部屋に話しかける」アシスタントデモ］

あなたの実際の部屋に話しかける

同じスキャンを、今度は MCP 経由でアシスタントに接続します。隙間を計測し、収まり具合を確認し、棚の上にあるものを説明するよう依頼すると——アシスタントはキャプチャしたシーンに基づいて答えます。重要なのは、アシスタントが既製のものではなくあなた自身の空間について推論している、ということです。

2 分で RakuAI を Claude に接続

Capture は新しいものです。しかし、AI が操作するランタイムはそうではありません。6 ツールの MCP サーバーはすでに稼働中で、デフォルトで拒否、すべての呼び出しが監査されます——そして Model Context Protocol を話せるあらゆるモデルが、それを通じてシーンを読み取れます。Claude Desktop に組み込んで、実際の空間について質問を始めましょう。

自分の空間をスキャンする Claude に接続する →