英語版が正式な参照です。内容に差異がある場合は、英語版を優先してください。
RUNTIME UI AUTOMATION FOR GAMES
DEMO AIエージェントがMCP経由でゲームUIを操作
ゲームUIを、意味で操作する。
Guaは、実行中のゲームUIをSemantic UI Treeとして公開する。座標や画像認識に頼らず、テストとAIから「開始ボタン」をその名前で見つけて操作できる。
まず最新Releaseを取得する
GodotアドオンとWindows版InspectorはGitHub Releases / Latestから取得できます。ソースビルドはGua本体を開発するときの経路です。
HOW IT WORKSゲームの入力経路を壊さずに観測する
01 / DRAWGodotが通常どおりUIを描画
02 / REFLECTアダプターが意味情報を自動収集
03 / CONNECTWebSocketブリッジが外部へ公開
04 / ACTテスト・Inspector・MCPが操作