画面を見て質問に答えてくれる AI（2026年版）

返信が必要なメールを見ているとき、いちばんやりたくないのは、それをチャットにコピーして Anna が誰なのかを説明することです。画面を見てくれる AI なら、その手間が要りません。

今ではいくつもの AI が画面を見られます。その中で、見ているアプリでそのまま作業までできるのが Incredible です。キーを押し続けて「これに返信して」と言えば、メールに返信を書き、送信する前に確認を求めます。上の録画では、Figma で開いているカードのデザインを読み取り、直すべき点を挙げています。

Incredible に何を言うか

起動すると、Incredible は目の前のページやドキュメントを見ます。トークキー（Mac では fn、Windows では Ctrl と Space）を押し続けて、そこにあるものについて話します。

「今、画面に何が映ってる？」

「これに返信して、木曜日で大丈夫と伝えて」

1つ目には答えが返ってきます。2つ目は実行されます。

見せるものを正確に選びたいときは、⌥ X で画面をキャプチャし、⌥ C で選択したテキストやファイルを次の依頼のために取り込みます（Windows では Alt）。すべてのショートカットはショートカットのガイドに載っています。

AI に画面を見せる方法

どれにも専用のキーやボタンがあり、あなたが頼むまでは、どれも画面を見ません。

1. Incredible（Mac と Windows）：Mac では fn、Windows では Ctrl と Space を押し続けて尋ねます。話しているあいだ、目の前のページやドキュメントを見ます。
2. ChatGPT（Mac と Windows）：デスクトップアプリで、Mac では左右の Command キーを両方押すと、最前面のウィンドウが appshot としてチャットに送られます。
3. Siri AI（Mac）：画面に映っているものについて Siri に尋ねます。macOS 27 と、M1 以降を搭載した Mac が必要です。
4. Copilot Vision（Windows）：Copilot のセッションを始めて、見てほしいウィンドウを共有します。
5. Gemini（Mac）：Google のデスクトップアプリで、左右の Command キーを両方押すと、画面に映っているものを共有できます（Google）。Apple Silicon を搭載し、macOS Sequoia 以降を入れた Mac が必要です。

ほかに画面を見られる AI は？

Siri AI は、macOS 27 以降の Mac で使えます。Apple のガイドによると、「ビジュアルインテリジェンスを利用して、Mac の画面に表示されているものにもとづいて質問したり、操作したり、検索したり」できます。M1 以降を搭載した Mac が必要で、まずは英語のベータ版として提供されます。

ChatGPT では、この機能を Appshots と呼んでいます。デスクトップアプリで左右の Command キーを両方押すと、最前面のウィンドウを画像とテキストとして取り込みます。そのアプリの中でクリックさせるのは、Computer Use という別の機能です。Incredible と ChatGPT の違い。

Copilot Vision（Windows）では、セッション中にウィンドウを共有できます。Microsoft によると、「あなたの代わりにクリック、テキスト入力、スクロールをすることはありません」（Microsoft）。

Mac に絞った情報は、2026年に Mac でおすすめの AIをご覧ください。画面を見たあとにタスクまで実行してくれる AI については、パソコンを操作できる AI エージェントと AI を使って、声でパソコンを操作する方法をご覧ください。