Keräsimme $2,7M pre-seed-rahoituksen. Lue tiedoteKeräsimme $2,7M pre-seed-rahoituksen →

Tekoäly, joka näkee näyttösi ja vastaa kysymyksiin (2026)

Mikä tekoäly näkee näyttösi ja vastaa kysymyksiin siitä: Incredible, Siri AI, ChatGPT ja Copilot Vision, miten kunkin saa päälle ja mikä niistä myös tekee tehtävän.

Emil WagmanCTO

Lyhyt vastaus

Kyllä. Incredible näkee Macilla ja Windowsissa, mitä näytölläsi on, kun pidät sen näppäintä pohjassa, vastaa kysymykseesi siitä ja voi sitten tehdä tehtävän kyseisessä sovelluksessa. Myös Macin Siri AI, ChatGPT:n työpöytäsovellus ja Windowsin Microsoft Copilot Vision voivat katsoa näyttöäsi ja vastata kysymyksiin siitä.

7 päivää ilmaiseksi. Mac ja Windows.

Katsot sähköpostia, johon pitää vastata, ja viimeinen asia, jota haluat tehdä, on kopioida se keskusteluun ja selittää, kuka Anna on. Näyttösi näkevä tekoäly ohittaa sen vaiheen.

Useampi osaa sen jo. Incredible on se, joka voi sen jälkeen tehdä työn siinä sovelluksessa, jota se katsoo. Pidä näppäintä pohjassa ja sano ”vastaa tähän”, niin se kirjoittaa vastauksen sähköpostiisi ja kysyy ennen kuin se lähetetään. Yllä oleva tallenne näyttää, kuinka se lukee Figmassa auki olevan korttisuunnitelman ja listaa, mitä pitää korjata.

Mitä sanot Incrediblelle

Incrediblen puhepalkki Macin näytön yläreunassa, ja siinä sanat: Hey Incredible, mitä näytölläni on juuri nyt?
Pidä näppäintä pohjassa ja kysy Incredibleltä, mitä näytölläsi on.

Kun aktivoit Incrediblen, se näkee edessäsi olevan sivun tai dokumentin. Pidät puhenäppäintä pohjassa (Macilla fn, Windowsissa Ctrl ja Space) ja puhut siitä, mitä siinä on:

”Mitä näytölläni on juuri nyt?”

”Vastaa tähän ja kerro, että torstai sopii.”

Ensimmäiseen saat vastauksen. Toinen tulee tehdyksi.

Jos haluat valita tarkalleen, mitä se näkee, ⌥ X ottaa kuvan näytöstäsi ja ⌥ C nappaa valitun tekstin tai tiedoston seuraavaa pyyntöäsi varten (Windowsissa Alt). Opas Pikanäppäimet listaa ne kaikki.

Incredible näkee, mitä näytöllä on, ja jatkaa siitä: tässä se täyttää auki olevan laskun.

Näin annat tekoälyn nähdä näyttösi

Molemmat Command-näppäimet avaavat Gemini-sovelluksen ja ottavat mukaan ikkunan, jota katsot. Video: Google.

Kullakin on oma näppäimensä tai painikkeensa, eikä mikään niistä katso näyttöäsi ennen kuin pyydät:

  1. Incredible (Mac ja Windows): pidä Macilla fn tai Windowsissa Ctrl ja Space pohjassa ja kysy. Se näkee edessäsi olevan sivun tai dokumentin, kun puhut.
  2. ChatGPT (Mac ja Windows): paina työpöytäsovelluksessa Macilla molempia Command-näppäimiä, niin etualan ikkuna lähtee keskusteluun appshotina.
  3. Siri AI (Mac): kysy Siriltä siitä, mitä näytölläsi on. Se vaatii macOS 27:n ja Macin, jossa on M1 tai uudempi.
  4. Copilot Vision (Windows): aloita Copilot-istunto ja jaa ikkuna, jota haluat sen katsovan.
  5. Gemini (Mac): paina Googlen työpöytäsovelluksessa molempia Command-näppäimiä jakaaksesi sen, mitä näytölläsi on (Google). Se vaatii Macin, jossa on Apple Silicon, ja macOS Sequoian tai uudemman.

Mitkä muut tekoälyt näkevät näyttöni?

MacBook, jonka näytöllä on uutiskirje Mailissa, kuva valittuna ja valikko, jossa ovat vaihtoehdot Ask Siri, Image Search ja Look Up Nutrition
Ask Siri -vaihtoehto Mailin uutiskirjeessä valitun kuvan kohdalla macOS 27:ssä. Kuva: Apple.

Siri AI Macilla macOS 27:stä alkaen. Applen ohjeen mukaan se voi ”Visual Intelligencen avulla esittää kysymyksiä, tehdä toimintoja ja hakea sen perusteella, mitä Macin näytöllä on”. Se vaatii Macin, jossa on M1 tai uudempi, ja on aluksi beetaversio englanniksi.

ChatGPT kutsuu sitä nimellä Appshots: paina työpöytäsovelluksessa molempia Command-näppäimiä, niin se saa etualan ikkunan kuvana ja tekstinä. Klikkaaminen kyseisessä sovelluksessa sen jälkeen on erillinen ominaisuus, Computer Use. Incredible ja ChatGPT vertailussa.

Copilot Vision Windowsissa antaa sinun jakaa ikkunan istunnon aikana. Microsoftin mukaan se ”ei klikkaa, syötä tekstiä eikä vieritä puolestasi” (Microsoft).

IncredibleSiri AIChatGPTCopilot Vision
Tekee sen jälkeen tehtävän kyseisessä sovelluksessaKylläTekee toimintoja Applen sovelluksissaErillisellä Computer Use -ominaisuudellaEi, se opastaa sinua
Mac ja WindowsMolemmatMacMolemmatWindows

Kokeile heti. Avaa mikä tahansa sähköposti, pidä näppäintä pohjassa ja sano: ”Vastaa tähän ja kerro, että torstaina kello 10 sopii.” Incredible on ilmainen 7 päivän ajan. Lataa se tai lue ensin opas Pika-aloitus.

Nimenomaan Macista kerrotaan artikkelissa paras tekoäly Macille vuonna 2026. Tekoälyistä, jotka myös tekevät tehtävän nähtyään näytön, kerrotaan artikkeleissa tietokonettasi käyttävät tekoälyagentit ja näin ohjaat tietokonettasi äänelläsi.

Usein kysytyt kysymykset

Onko olemassa tekoälyä, joka näkee näyttöni?

Kyllä. Incredible näkee Macilla ja Windowsissa, mitä näytölläsi on, kun pidät sen näppäintä pohjassa, vastaa kysymykseesi siitä ja voi sitten tehdä tehtävän kyseisessä sovelluksessa. Myös Macin Siri AI, ChatGPT:n työpöytäsovellus ja Windowsin Microsoft Copilot Vision voivat katsoa näyttöäsi ja vastata kysymyksiin siitä.

Voiko tekoäly nähdä näyttöni ja sitten tehdä tehtävän puolestani?

Jotkin voivat. Microsoftin mukaan Copilot Vision vastaa ja opastaa mutta ei klikkaa eikä kirjoita puolestasi. Incredible näkee edessäsi olevan sivun tai dokumentin, kun aktivoit sen, ja voi sitten tehdä tehtävän kyseisessä sovelluksessa, esimerkiksi ”vastaa tähän”.

Onko olemassa tekoälyä, joka osaa lukea näyttöni ja vastata kysymyksiin siitä?

Kyllä. Kysy Incredibleltä ”mitä näytölläni on?” tai kysy edessäsi olevasta sähköpostista, lomakkeesta tai dokumentista, niin se vastaa sen perusteella, mitä se näkee. Myös Siri AI, ChatGPT:n appshotit ja Copilot Vision vastaavat kysymyksiin näytöstäsi. Incredible ja Siri AI voivat sen jälkeen myös toimia; Copilot Vision vain opastaa.

Tallentaako näyttöäni näkevä tekoäly sitä koko ajan?

Tarkista, milloin kukin katsoo. Siri AI katsoo, kun kysyt siltä näytöstäsi, ChatGPT, kun otat appshotin, Copilot Vision silloin, kun jaat ikkunaa, ja Incredible, kun aktivoit sen.

Miten annan ChatGPT:n nähdä näyttöni Macilla?

Paina ChatGPT:n työpöytäsovelluksessa molempia Command-näppäimiä ottaaksesi appshotin. Se lähettää etualalla olevan ikkunan keskusteluun kuvana ja niiden tekstien kanssa, jotka sovellus antaa käyttöön.

Muotokuva: Emil Wagman

Kirjoittanut

Emil Wagman

CTO, Incredible · LinkedIn

ChatGPT kirjoittaa sen. Incredible tekee sen.

Se klikkaa ja kirjoittaa selaimessasi, tiedostoissasi ja sovelluksissasi aivan kuten sinä.

Vaatii macOS 13:n tai Windows 10:n tai uudemman.