オープンソースデスクトップツール
Computer Use
Agent がコンピューターを直接観察し、操作できるように
Computer Use は、普段使っている AI Agent をネイティブのデスクトップホストに接続します。Agent がタスクを理解して手順を計画し、ローカルホストがウィンドウを観察して、許可されたクリック、入力、ショートカット、スクロールを実行します
開発プレビューオープンソースmacOS / WindowsMCP / CLI
Computer Use でできること
ウィンドウの観察と操作
スクリーンショットとアクセシビリティ要素でアプリの画面を把握し、デスクトップ操作を実行します。対応範囲はプラットフォーム、アプリ、コントロールによって異なります
既存の Agent に接続
Skill、MCP、CLI で接続できます。macOS と Windows のネイティブホストを提供し、標準ではバックグラウンドで実行します
ローカルで権限を管理
初回ペアリングをアプリ内で承認し、クライアントの権限を管理できます。いつでも一時停止、権限の取り消し、緊急停止が可能です
権限とプライバシー
ネイティブホストがローカルでデスクトップ操作を実行します。Agent に送信したスクリーンショットや結果は、選択したモデルサービスで処理されます