発見したAIが本当に「手」を使って作業できるオープンソースプロジェクト


cua、16.7kスター、チャットボットではなく、AIが直接コンピュータを制御するインフラ基盤
核心は一点:AIにマウスクリック、キーボード入力、画面を見ることができるサンドボックス環境を提供し、人のようにソフトウェアを操作させること
いくつかのサブプロジェクトの役割はかなり明確だ:
✅ Cua Driver:macOSのバックグラウンド操作ドライバ、AIがボタンをクリックしたりタイピングしたりしてもカーソルを奪わず、ウィンドウを切り替えず、静かに作業
✅ Cua Sandbox:APIを統一し、Linux/macOS/Windows/Androidの任意のシステムを制御、クラウドまたはローカルで動作可能
✅ CuaBot:Claude CodeやCursorなどのコーディングエージェントにサンドボックスを直接設定、すぐに使える状態
✅ Cua-Bench:エージェントの操作能力を評価するベンチマークテスト、OSWorldやScreenSpotなどのデータセットを実行
✅ Lume:Apple Silicon上でmacOS仮想マシンを動かし、ネイティブに近いパフォーマンスを実現
コードを見るとRust + Swift + Pythonのハイブリッドで構築されており、かなり本格的なアーキテクチャだ。エージェントの自動化やデスクトップタスクのオーケストレーション、あるいは単純に「AIがどうやってコンピュータを使うのか」に興味がある人はソースコードを覗く価値がある
プロジェクトのURLはコメント欄に貼った👇
原文表示
post-image
このページには第三者のコンテンツが含まれている場合があり、情報提供のみを目的としております(表明・保証をするものではありません)。Gateによる見解の支持や、金融・専門的な助言とみなされるべきものではありません。詳細については免責事項をご覧ください。
  • 報酬
  • コメント
  • リポスト
  • 共有
コメント
コメントを追加
コメントを追加
コメントなし
  • ピン留め