AI nhìn thấy màn hình của bạn và trả lời câu hỏi (2026)

Bạn đang nhìn một email cần trả lời, và điều cuối cùng bạn muốn làm là sao chép nó vào một cuộc trò chuyện rồi giải thích Anna là ai. Một AI nhìn thấy màn hình của bạn sẽ bỏ qua bước đó.

Giờ đã có vài AI làm được. Incredible là AI có thể làm luôn công việc trong ứng dụng mà nó đang nhìn. Giữ phím và nói “trả lời cái này”, Incredible sẽ viết thư trả lời ngay trong email của bạn và hỏi bạn trước khi gửi. Video ở trên cho thấy Incredible đọc một thiết kế thẻ đang mở trong Figma và liệt kê những gì cần sửa.

Bạn nói gì với Incredible

Khi bạn kích hoạt, Incredible nhìn thấy trang hoặc tài liệu trước mặt bạn. Bạn giữ phím nói (fn trên Mac, Ctrl và Space trên Windows) và nói về những gì đang có ở đó:

“Trên màn hình của tôi lúc này có gì?”

“Trả lời cái này và nói thứ Năm được nhé.”

Câu đầu tiên nhận được câu trả lời. Câu thứ hai thì được làm xong.

Để chọn chính xác những gì Incredible nhìn thấy, ⌥ X chụp màn hình của bạn và ⌥ C lấy đoạn văn bản đang chọn hoặc một tệp cho yêu cầu tiếp theo (Alt trên Windows). Hướng dẫn Phím tắt liệt kê tất cả.

Cách để AI nhìn thấy màn hình của bạn

Mỗi công cụ có phím hoặc nút riêng, và không công cụ nào nhìn màn hình cho đến khi bạn yêu cầu:

1. Incredible (Mac và Windows): giữ fn trên Mac, hoặc Ctrl và Space trên Windows, rồi hỏi. Incredible nhìn thấy trang hoặc tài liệu trước mặt bạn trong lúc bạn nói.
2. ChatGPT (Mac và Windows): trong ứng dụng cho máy tính, nhấn cả hai phím Command trên Mac để gửi cửa sổ phía trước vào cuộc trò chuyện dưới dạng appshot.
3. Siri AI (Mac): hỏi Siri về những gì đang có trên màn hình. Cần macOS 27 và máy Mac dùng chip M1 trở lên.
4. Copilot Vision (Windows): bắt đầu một phiên Copilot và chia sẻ cửa sổ bạn muốn Copilot nhìn vào.
5. Gemini (Mac): trong ứng dụng cho máy tính của Google, nhấn cả hai phím Command để chia sẻ những gì trên màn hình (Google). Cần máy Mac dùng Apple Silicon và macOS Sequoia trở lên.

Còn AI nào khác nhìn thấy được màn hình của tôi?

Siri AI trên Mac, từ macOS 27. Hướng dẫn của Apple cho biết Siri AI có thể “dùng Visual Intelligence để đặt câu hỏi, thực hiện hành động và tìm kiếm dựa trên những gì có trên màn hình Mac của bạn”. Cần máy Mac dùng chip M1 trở lên, và ban đầu là bản beta bằng tiếng Anh.

ChatGPT gọi tính năng này là Appshots: nhấn cả hai phím Command trong ứng dụng cho máy tính và ChatGPT nhận cửa sổ ở trên cùng dưới dạng ảnh và văn bản. Để ChatGPT nhấp chuột tiếp trong ứng dụng đó là một tính năng riêng, Computer Use. Incredible so với ChatGPT như thế nào.

Copilot Vision trên Windows cho phép bạn chia sẻ một cửa sổ trong một phiên. Microsoft cho biết Copilot Vision “không nhấp chuột, nhập văn bản hay cuộn thay bạn” (Microsoft).

Riêng cho Mac, xem AI tốt nhất cho Mac năm 2026. Nếu bạn cần một AI làm luôn tác vụ sau khi đã nhìn màn hình, xem các AI agent có thể dùng máy tính của bạn và cách điều khiển máy tính bằng giọng nói.