Što je Computer Use?
Computer Use je sposobnost AI modela da izravno upravljaju računalnim sučeljem: pomicanje kursora, klikanje gumba, unos teksta, navigacija web stranicama i desktop aplikacijama. Model "vidi" zaslon (snimka zaslona) i poduzima radnje poput čovjeka.
Kako to funkcionira?
Multimodalni model analizira snimku zaslona, prepoznaje elemente sučelja (gumbe, polja, izbornike), planira niz radnji i izdaje naredbe. Između svakog koraka analizira novo stanje zaslona i prilagođava plan.
Primjene u automatizaciji
Computer Use omogućuje automatizaciju procesa u naslijeđenim sustavima bez API-ja: unos podataka u stare aplikacije, navigacija portalima dobavljača, ispunjavanje administrativnih obrazaca. To je "zadnja milja" automatizacije — tamo gdje tradicionalna API integracija nije moguća ili nije isplativa.