Mis on Computer Use?
Computer Use on tehisintellekti mudelite võime otse arvutiliidest juhtida: kursori liigutamine, nuppude klõpsamine, teksti sisestamine, veebisaitidel ja töölauarakendustes navigeerimine. Mudel "näeb" ekraani (ekraanipilt) ja tegutseb nagu inimene.
Kuidas see toimib?
Multimodaalne mudel analüüsib ekraanipilti, tuvastab liidese elemente (nuppe, välju, menüüsid), planeerib tegevuste jada ja annab käske. Iga sammu vahel analüüsib uut ekraaniolekut ja kohandab plaani.
Automatiseerimise rakendused
Computer Use võimaldab protsesside automatiseerimist pärandsüsteemides ilma API-deta: andmete sisestamine vanadesse rakendustesse, tarnijate portaalides navigeerimine, halduslike vormide täitmine. See on automatiseerimise "viimane miil" — seal, kus traditsiooniline API integratsioon on võimatu või ebamajanduslik.