#computer-use リポジトリ
リポジトリ合計78件
CUGA は、エンタープライズ向けのオープンソースの汎用エージェント ハーネスで、Web と API 上での複雑なタスク実行、OpenAPI/MCP 統合、構成可能なアーキテクチャ、推論モード、ポリシー対応機能をサポートします。
UI-Venusは、スクリーンショットのみを入力として使用する、モバイルアプリ、Webプラットフォーム、デスクトップOS向けの汎用基盤GUIエージェントです。
コンピューター操作エージェントに関する、出典に基づくオープンカタログ:精査済み論文、GUIモデル、データセット、ベンチマーク、ツール、再利用可能なJSONL/SQLiteデータ。
Windows Agent Arena (WAA) 🪟 は、マルチモーダルAIエージェントのテストとベンチマークのためのスケーラブルなOSプラットフォームです。
AIエージェント向けのネイティブなLinuxデスクトップ操作(MCP、Pi、CLI):セマンティックなAT-SPIツリー、スクリーンショット、ウィンドウ指定、入力操作に対応。GNOME、KDE、Hyprland、niri、COSMIC、i3、Sway、labwcなどのwlrootsコンポジター、およびX11で動作します。
Invisible Playwright MCP:ボット対策やCAPTCHAに検出されないPlaywright MCPサーバー。AIエージェントが、検出回避型のステルスFirefox、Python、検出されにくいブラウザー自動化、スクレイピング、コンピューター操作を使ってウェブを閲覧します。
Claude やその他の AI モデルがコンピューターに自律的にアクセスできるように、Mac コンピューターで実行できる Anthropic Computer Use のフォークです。
アクセシビリティを最優先した、AIエージェント向けのブラウザーおよびコンピューター操作機能——あらゆるハーネス(Codex、Claude Code、OpenCode、Antigravity)に対応する単一のMCPサーバー。スクリーンショットを繰り返す代わりに、CDP経由でDOM/アクセシビリティツリーを調査します。差分スナップショット、安定した要素参照、信頼された入力、型付きエラーを提供。依存関係ゼロ
自己進化するエージェント型OS。オペレーティングシステムの原則に基づいて構築された、エージェント実行のための新しいアーキテクチャ。ハーネスを超知能への道筋とします。
Agent! が最新リリースで macOS 14.6以降、Apple SiliconおよびIntelに対応しました。Mac向け最高のAIエージェント:アクセシビリティを介してあらゆるアプリを操作し、Xcodeでコーディング・ビルドを行い、AppleScript、JXA、Swift、SMAppServiceシェル(ユーザー/root)を自動化します。23のLLMプロバイダーに対応し、ローカル/クラウドに加えて、デバイス上のApple IntelligenceとJev guardも利用できます。Auto-Pilot、MCP、Avatar。
AIエージェント向けのブラウザ自動化とコンピューター操作。ログイン済みのブラウザ、macOSネイティブアプリ、実機のiPhoneに対応する1つのCLIとMCPサーバー。
自分のモデルで動作する無料のGrok Bot代替サービス。すでに料金を支払っているChatGPT、Claude、またはGrokのサブスクリプションを使って、それぞれが独自のメモリとコンピューターを持つボットチームを手に入れましょう。
Windows x64 上の AI エージェント向けハードウェアマウス MCP サーバー。USB HID 制御と音声ディクテーションに対応し、互換性のある uMouse ハードウェアとファームウェアが必要です。
Appleシリコンでのローカルなコンピューター操作:macOSのアクセシビリティAPIを介し、layaでデバイス上の型付き意思決定を行い、CUA-S1-FORMSでフォームに入力
Browser Operator — マルチエージェント・プラットフォームを内蔵した AI ブラウザ!ChatGPT Atlas、Perplexity Comet、Dia、Microsoft Copilot Edge ブラウザに代わるオープンソースの選択肢
高速応答でトークンを節約。AIエージェント(Claude Code、Codex、あらゆるMCPクライアント)に実機のiPhoneを操作させましょう · AIエージェントが実機のiPhoneを操作:画面の読み取り、タップ、入力、スワイプに対応。USBまたはWi-Fi接続、自前のXCTestランナーを備え、アプリの操作フローを再生できます。オープンソースで、macOS上にセルフホスト可能。