Kas ir Computer Use?
Computer Use ir MI modeļu spēja tieši vadīt datora saskarni: pārvietot kursoru, klikšķināt pogas, ievadīt tekstu, navigēt tīmekļa vietnēs un darbvirsmas lietotnēs. Modelis "redz" ekrānu (ekrānuzņēmums) un veic darbības kā cilvēks.
Kā tas darbojas?
Multimodāls modelis analizē ekrānuzņēmumu, atpazīst saskarnes elementus (pogas, laukus, izvēlnes), plāno darbību secību un izdod komandas. Starp katru soli tas analizē jauno ekrāna stāvokli un pielāgo plānu.
Automatizācijas pielietojumi
Computer Use ļauj automatizēt procesus mantotajās sistēmās bez API: datu ievadi vecajās lietotnēs, navigāciju piegādātāju portālos, administratīvu veidlapu aizpildīšanu. Tā ir automatizācijas "pēdējā jūdze" — tur, kur tradicionāla API integrācija nav iespējama vai ekonomiski pamatota.