GitHub Copilotに「computer use」がパブリックプレビュー — CLIとCopilotアプリがデスクトップ操作に対応

GitHubは2026年10月1日（米国時間）、GitHub Copilot CLIとGitHub Copilotアプリ（macOS・Windows）で「computer use」をパブリックプレビューとして提供開始したと発表した。Copilotが利用者に代わってデスクトップアプリケーションを操作できる機能で、APIやコマンドライン、MCP連携を持たないレガシーなソフトやGUI専用ソフトのワークフローも自動化の対象になるとしている。以下はGitHub Changelogの記載範囲の整理である。

提供範囲 — CLIとmacOS・Windows版アプリのパブリックプレビュー

• 対象: Copilot CLIとGitHub Copilotアプリ（macOS・Windows）で利用できる。
• 位置づけ: パブリックプレビューであり、仕様は変更される可能性がある。
• できること: デスクトップアプリのアクセシブルな内容や視覚的コンテキストの読み取り、コントロールのクリック、テキストの入力・編集、キー操作、スクロール、ドラッグ、アプリをまたぐワークフローの操作を代行する。
• 狙い: API・CLI・MCP連携を持たないレガシーソフトやGUI専用ソフトの作業を含め、Copilotが手伝える範囲を広げることと説明されている。
• 例示: ブラウザー内の通知の要約、プレゼンテーションの内容更新、デスクトップアプリ内のワークフローでの情報移動などを、望む結果・関係するアプリ・重要な制約とともに指示するとうまくいくとしている。

安全策 — 操作前の承認と権限・管理設定

• 承認: Copilotはアプリを操作する前に承認を求める。常時許可に設定したアプリは、あとから見直しや取り消しができるとしている。
• macOSの権限: macOSではアクセシビリティと画面収録の許可が必要で、設定手順を案内するとしている。
• 組織管理: 組織が管理する設定でこの機能を無効化できるとしている。
• 注意: 料金・対象プランやベンチマーク数値はChangelogに記載がないため、本記事では扱わない。

使い方 — CLIのコマンドとアプリの設定

• Copilot CLI: /computer on で有効化する。/computer show で状態確認、/computer off で無効化する。
• GitHub Copilotアプリ: Settingsを開き「Computer Use」を選んで「Enable Computer Use」をオンにする。/computer on も使えるとしている。
• 詳細資料: ChangelogはCopilot CLIとCopilotアプリにおけるcomputer useのドキュメントを案内している。具体的な操作手順や対応条件は一次資料を参照されたい。

出典

• GitHub Copilot can now interact with desktop apps with computer use