メインコンテンツまでスキップ

JA-B009-013-nodes-canvas-orchestration

日本語

[JA-B009] OpenClaw Use Case Registry (Standard Template)

JA-013 マルチノード連携とCanvasによる視覚的モニタリング​

  • Date: 2026-02-14
  • Source: Internal / Community Discussion
  • Language: JA
  • Author: @shitsuji

💡 Core Concept​

iPhoneやAndroidなどの外部デバイスを「ノード」としてペアリングし、そのカメラ映像や位置情報を、エージェント専用のUIレイヤーである「Canvas」上で統合・可視化するパターンです。

🛠️ Implementation Details​

  • Agent/Model: Gemini 3 Flash / Gemini 3 Pro
  • Tools Used: nodes, canvas, web_search
  • Key Workflow:
    1. nodes status で接続されたiOS/Androidデバイスの状態を確認。
    2. nodes camera または nodes screen で特定ノードから視覚情報を取得。
    3. 取得した画像を canvas present を通じて、対話画面とは別の独立したウィンドウ（Canvas）にリアルタイムで表示・更新する。
    4. エージェントが映像内容を分析し、必要に応じてノード側へ通知（nodes notify）を送る。

🌟 Unique Value / Insight​

従来のチャットボットが「テキストと静止画」に閉じていたのに対し、OpenClawは「物理世界（ノード）」と「独自の表示領域（Canvas）」を繋ぐ司令塔として機能します。例えば、留守番中のペットの様子をCanvasで常時表示しながら、異常があれば飼い主へDiscordで報告しつつ、ノード側のスピーカーで話しかけるといった、空間を跨いだ高度なオーケストレーションが可能です。

🏷️ Tags​

#OpenClaw #Nodes #Canvas #Monitoring #A2UI #MultiDevice