AI エージェントに desktop を操作させるための基盤。macOS・Windows・Linux のアプリを操作する driver、macOS の VM、クラウド desktop、評価用 benchmark を含む。

できること

  • Cua Driver：ネイティブアプリとブラウザを CLI、MCP、SDK から操作する
  • Lume：macOS の VM を手元で動かす
  • Cua Fleets：エージェント用の隔離されたクラウド desktop（サービスは run.cua.ai）
  • CUA-S1：computer-use 向けの小型特化モデル
  • エージェントの評価・学習データ作りのための benchmark

使い方

Cua Driver は https://cua.ai/docs/how-to-guides/driver/install の手順で入れる（コマンドは今回は未確認）。

活用できそうな場面

  • GUI しか無いアプリの操作を、エージェントに任せる検証環境に使えそう
  • macOS VM を使ったエージェントの隔離実行に使えそう

向いている人

computer-use エージェントを作る・評価する人

似ているもの

  • Anthropic の computer use のリファレンス環境：用途は近い。こちらは driver と VM まで含む

技術

Swift（macOS の仮想化）、Python、TypeScript。MIT。

注意点

Fleets はホスト型サービスへの入口にもなっている。Driver の background 操作はアプリやプラットフォームによって使えない場合がある（README に注記）。