GitHub Copilotがpc操作機能「Computer Use」を追加したことで、APIを持たないデスクトップアプリもAIが自律的に操作できるようになりました。2026年10月1日にパブリックプレビューとして公開。Copilot CLIとGitHub Copilotアプリ（macOS・Windows）で利用できます。
APIのないアプリも、画面を読んでクリックして操作する
Copilotがやることはシンプルです。画面の内容を読み取り、ボタンをクリックし、テキストを入力する。スクロールやドラッグにも対応していて、複数のアプリをまたいだ連続作業もAIが代わりに進めます。
これまではAPIかコマンドラインを持つソフトだけが自動化の対象でした。社内システムや業務専用ソフトの多くは、どれだけ作業が煩雑でも自動化から取り残されていました。Computer Useはその制約をなくします。
経費入力・出張手配・テスト実行が、初めて自動化の射程に
GUIだけを持つアプリでも、Copilotが画面を見ながら操作します。経費精算システムへの入力、社内専用ツールでの出張手配、GUIしか持たないレガシーシステムのエンドツーエンドテストの実行。こうした作業が対象になります。
OracleがERPにAIエージェントを組み込んだのと同じ方向性の動きですが、Computer Useが違うのはシステム改修なしに既存のGUIアプリをそのまま使えること。開発リソースがない組織でも試しやすい点は大きいかもしれません。
この機能で重要なのは「コードを書かなくていい」ことです。Copilotに画面上のタスクを指示するだけで実行されます。GitHub Copilotが開発者のコーディング支援ツールから、PCそのものを操作するエージェントへと役割を広げたことを意味します。
有効化の手順と、気をつけたい安全設定
デフォルトでは無効になっています。CLIなら /computer on コマンド、デスクトップアプリなら「設定 → Computer Use」から有効化します。macOSではアクセシビリティと画面収録の権限が必要です。
操作前にはユーザーの承認を求める設計で、「常時許可」に設定したアプリの確認・リセットができます。なお、「常時許可」の設定を削除しても、実行中のセッションに付与済みの権限は自動では取り消されません。組織のIT管理者は機能をオフにする制御も可能。パブリックプレビュー中は、機密性の高いアカウントやデータへの恒久的な権限は与えないことが公式に推奨されています。詳細はGitHub公式Changelogで確認できます。
FREE DOWNLOAD
実務で使えるお役立ちコンテンツを無料で見る
無料会員登録で、実務で使えるAIテンプレート・プロンプト・PDFを受け取れます。
全PDFにアクセスする（無料）
無料会員登録して受け取る
「APIがないから自動化できない」って言われてきたあの作業、これで変わるかもしれません。
レガシーシステムへの入力や、社内専用ツールの操作など、地道に手でやり続けてきた仕事が初めて自動化の対象になるのは、思った以上に大きな変化だと思います。
まずは低リスクな作業から試してみて、どこまで任せられるか感覚をつかんでみてください。