Želite li ikada da vaš preglednik jednostavno... ispuni obrazac umjesto vas?
Zamislite ovo: 23:58 je. Obećali ste predati isti obrazac za troškove koji vaša tvrtka koristi otkad je Netscape bio popularan. Škiljite u 17 polja—ime, adresa, datum, opet datum (u dva formata!), padajući izbornik koji radi samo ako kliknete točno na trokut. Gunđate. Vaša kava uzdiše. Pitate se je li internet odrastao i zaboravio vas povesti sa sobom.
Upoznajte Gemini 2.5 Computer Use—Googleov model koji, uz pravi postav, može upravljati vašim računalom poput strpljivog asistenta kojem ne smeta klikanje, tipkanje, skrolanje i učitavanje u vaše ime. Ne samo odgovaranje na pitanja. Ne samo predlaganje pritisaka tipki. Govorimo o tome da zapravo pomiče kursor, otvara stranicu, prijavljuje se i popunjava web obrazac.
Osjećate li se kao da ste predali ključeve automobila prijatelju koji je tek naučio voziti s ručnim mjenjačem? Da. Je li čudno uzbudljivo kad radi? Također da. I to je današnja vožnja: kako automatizirati web obrasce s Gemini 2.5 Computer Use u akciji—sigurno, razumno i uz nekoliko smijeha kad misli da je gumb “Pošalji” zapravo ukrasni logo.
U ovom praktičnom vodiču provest ću vas kroz:
- Što “Computer Use” zapravo znači za Gemini 2.5
- Kako postaviti tijek rada za popunjavanje obrazaca koji se može ponoviti i nije zastrašujući
- Demo korak po korak: od CSV-a do ispunjenih obrazaca
- Trikovi za teška polja (captcha, birači datuma, višestupanjski čarobnjaci)
- Sigurnost, privatnost i vrlo stvarne granice današnje web automatizacije
- Kako alati poput Sider.AI mogu biti vaše zapovjedno središte za ukroćivanje ovog cirkusa
Sve na jednostavnom ljudskom jeziku. S odstupanjima za stvarne zamke s kojima ćete se susresti na putu.
Što je Gemini 2.5 Computer Use? Zamislite ga kao pažljivog robota pripravnika
“Computer Use” je način rada u kojem Gemini 2.5 ne samo da generira tekst—već kontrolira preglednik i vaše računalo, pod vašim nadzorom. Može:
- Otvoriti web stranicu, kretati se izbornicima i klikati uokolo
- Tipkati u ulazna polja i tekstualna područja (čak i ona koja se pojave nakon tri modala)
- Učitavati/preuzimati datoteke
- Snimati zaslone i razmišljati o onome što vidi (to je čarolija)
U praktičnom smislu, Gemini 2.5 Computer Use može automatizirati web obrasce od početka do kraja. Opisujete zadatak (“Idi na ovaj URL, prijavi se, predaj tjedni obrazac za kilometražu za ovaj popis zaposlenika”), date mu podatke i on obavlja klikanje i tipkanje. Žalba? Nema više automatizacije okretne stolice—kopiranje iz proračunskih tablica i lijepljenje u polja dok vaša duša ne napusti vaše tijelo.
Ali—i ovo je 'ali' veličine slavne osobe—web je zoološki vrt. Obrasci se jako razlikuju. Neki zahtijevaju jednoznamenkaste mjesece; drugi žele puni naziv mjeseca na norveškom. Zato će vam trebati nekoliko najboljih praksi i karta za kada se robot pripravnik zbuni.
Pravi poslovi za Gemini 2.5: Kada automatizacija blista (i kada ne)
Koristite Gemini 2.5 Computer Use za:
- Ponavljajuće interne obrasce (izvješća o troškovima, ažuriranja ljudskih resursa, uvođenje, zahtjevi za putovanja)
- Vendorske portale s dosljednim izgledima i predvidljivim poljima
- Migracije unosa podataka (CSV u web obrazac, baza podataka u SaaS aplikaciju)
- Ažuriranja više zapisa gdje je put isti; samo se vrijednosti mijenjaju
Izbjegavajte (ili se pripremite za više držanja za ruke) kada:
- Postoji captcha ili agresivna obrana od botova (izbacivač s baterijskom svjetiljkom)
- Za svaku radnju potrebna je dvofaktorska autentifikacija
- Izgled stranice radikalno se mijenja po zapisu
- Pristupačnost je loša (neoznačena polja, stvari koje se mogu kliknuti, a nisu gumbi)
Pravilo: Ako pažljiv čovjek to može učiniti u ritmu, Gemini 2.5 to obično može naučiti. Ako pažljiv čovjek mora nagađati svaki korak, model bi mogao kvalitetno vrijeme provesti klikajući ukrasne ukrase.
Vaš početni paket: Alati i priprema
Trebat će vam:
- Preglednik koji Gemini može kontrolirati (obično Chrome/Chromium putem sigurnog sloja automatizacije)
- Akreditivi samo za čitanje za ciljanu stranicu ako je moguće (način razmišljanja o najmanjim privilegijama)
- Čist testni račun ili sandbox okruženje (tako da slučajno ne naručite 12.000 widgeta)
- Vaši podaci u urednom formatu (CSV, JSON ili Google Sheet), s zaglavljima koja odgovaraju oznakama obrasca
- Popis polja obrasca redoslijedom kojim se pojavljuju
Izborno, ali vrlo korisno:
- Snimke zaslona obrasca s označenim oznakama poput dijagrama trenera koji crta igru
- Mali skup od 3–5 uzoraka redaka za probne vožnje
- Datoteka zapisnika u kojoj bilježite status svakog pokretanja i sve pogreške
Vodič: Gemini 2.5 Computer Use ispunjava uzorak obrasca za troškove
Učinit ćemo ovo kao kulinarsku emisiju. Do kraja ćete imati 40 predanih obrazaca i nijedan srušeni souffle.
Scenarij: Vaš tim predaje tjedne povrate kilometraže. Web obrazac ima:
- Ime zaposlenika (tekstualno polje)
- Završetak tjedna (birač datuma)
- Stopa (padajući izbornik: 0,50, 0,58, 0,62)
- Bilješke (tekstualno područje)
- Pošalji, zatim potvrdni kod
Vaši podaci žive u CSV-u:
name,week_ending,total_miles,rate,notes,receipt_path
Alex Park,2025-10-03,142,0.58,Posjete klijentima u zoni B,/receipts/alex-1003.pdf
Riya Shah,2025-10-03,87,0.58,Vožnje shuttleom do zračne luke,/receipts/riya-1003.pdf
...itd.
Korak 1: Pripremite Gemini 2.5 s kontekstom
- Navedite URL stranice, sve korake prijave i točne oznake kako su napisane na stranici.
- Uključite zaglavlja CSV-a i opis kako ih mapirati u polja.
- Recite što učiniti kada polja nedostaju ili su blokirana (npr. preskočite redak, zabilježite pogrešku).
Primjer isječka uputa:
“Otvori Prijavite se s testnim računom. Za svaki redak CSV-a unesite Ime → Ime zaposlenika, week_ending → Završetak tjedna (YYYY-MM-DD), total_miles → Ukupno milja, rate → Padajući izbornik Stopa, notes → Bilješke, receipt_path → Učitaj. Pošalji. Nakon slanja, kopirajte potvrdni kod i zabilježite ga pored retka.”
Korak 2: Jedna suha vožnja s jednim retkom
- Zatražite od Geminija da izvede jedan zapis, polako, pripovijedajući svaku radnju. Pazite na njega kao jastreb.
- Potvrdite da odabire pravi padajući izbornik i ne upisuje bilješke u polje “Ukupno milja” (događa se!).
- Ako birač datuma otvori widget kalendara, uputite: “Upišite datum izravno u polje u formatu YYYY-MM-DD; nemojte klikati kalendar.”
Korak 3: Dodajte zaštitne ograde
- Recite mu kako otkriti uspjeh: npr. potražite riječ “Potvrda” i uzorak koda kao što je EXP-####.
- Recite mu kako otkriti neuspjeh: ako se pojavi “Pogreška” ili “Pokušajte ponovo”, snimite zaslon i preskočite na sljedeći redak.
- Ograničite tempo: “Pričekajte 500–800 ms nakon svakog učitavanja stranice. Ako je gumb onemogućen, ponovno provjerite potrebna polja.”
Korak 4: Način rada serije
- Sada kažete: “Obradite sljedećih pet redaka.” Promatrajte. Ako se ponaša, povećajte na 20.
- Vodite zapisnik: broj retka, status, potvrdni kod, put snimke zaslona.
Korak 5: Završetak
- Izvezite zapisnik kao CSV. Neka ga Gemini zalijepi natrag ili ga spremite u svoju mapu. Provjerite nekoliko slanja na portalu.
Ono što ste učinili je da ste naučili Gemini 2.5 Computer Use ritual. Za razliku od krhkih skripti, on vidi stranicu, prilagođava se malim pomacima sučelja i nastavlja dalje. To je kao rad s pažljivim asistentom; pokažete, zatim vjerujete—ali i dalje provjeravate posao.
Ljepljivi dijelovi: Birači datuma, učitavanje datoteka, višestupanjski čarobnjaci
Kako se nositi s uobičajenim zlikovcima u web obrascima:
- Birači datuma: Uputite Gemini da upiše datum u ulazni okvir pomoću prihvaćenog formata stranice. Ako stranica zabranjuje tipkanje, recite: “Otvorite kalendar, idite na ispravan mjesec pomoću strelica lijevo/desno, a zatim kliknite datum.” Uključite primjere: “Za 2025-10-03, odaberite 3. listopada 2025.”
- Numerička validacija: Neka polja odbijaju zareze ili više od dvije decimale. Razjasnite: “Unesite Ukupno milja kao cijeli broj bez zareza.” Ako vidite crveni tekst pogreške, recite Geminiju kako ga ukloniti.
- Padajući izbornici: Mnogi su prilagođeni widgeti sa skrivenim popisima. Recite: “Kliknite padajući izbornik Stopa; ako se opcije ne otvore, kliknite ikonu strelice. Odaberite tekst ‘0,58’. Ako nije vidljivo, pomičite se unutar padajućeg popisa.”
- Učitavanje datoteka: Usmjerite Gemini na točan put datoteke. Ako se pojavi dijaloški okvir OS-a, recite mu da upiše put u polje naziva datoteke i pritisne Enter. Ako je dopušteno više datoteka, odredite treba li stati nakon jedne.
- Višestupanjski obrasci: Recite Geminiju da pričeka da gumb “Dalje” postane omogućen. Ako se stranica promijeni, potvrdite traženjem naslova kao što je “Korak 2: Detalji.”
- Captcha i MFA: Vaš znak za odustajanje. Zatražite pauzu kako bi čovjek mogao obaviti captcha ili odobriti push obavijest. Zatim dopustite Geminiju da nastavi.
- Skočni prozori za automatsko dovršavanje: Ako se mjehurić s prijedlozima preglednika preklapa s poljem, uputite Gemini da pritisne Escape prije tipkanja.
Provjera stvarnosti o brzini i točnosti
Gemini 2.5 Computer Use nije trkaći automobil—više je poput vrlo strpljivog biciklista koji poštuje svaki znak stop. Neće pobijediti ljudskog brzinskog demona pognute glave, ali štedi vašu pozornost. Što je još važnije, ne postaje nemaran na desetom identičnom obrascu.
Savjeti za točnost:
- Počnite s pet zapisa. Ispravite probleme. Zatim skalirajte.
- Dodajte “provjere zdravog razuma” nakon svakog slanja: potvrdite ukupne iznose, provjerite pojavljuje li se novi redak na stranici povijesti portala.
- Održavajte podatke čistima na izvoru: ujedinite formate datuma; unaprijed provjerite brojeve.
- Zabilježite sve. Ako to ne možete revidirati, ne možete vjerovati.
Sigurnost na prvom mjestu: Dozvole, privatnost i granice
Predavanje kontrole vašeg preglednika umjetnoj inteligenciji je kao davanje kreditne kartice vašem djetetu u trgovini. Postavite pravila.
- Koristite zaseban profil preglednika s ograničenim kolačićima i dozvolama.
- Stvorite testnog korisnika s “najmanjim privilegijama”—bez administratorskog pristupa, ograničenog opsega.
- Nikada ne pohranjujte stvarne lozinke u običnom tekstu unutar upita. Koristite siguran upravitelj tajni ako je dostupan.
- Ako tijek dodiruje osobne podatke (SSN, zdravstveni detalji), prvo to raščistite sa svojim timom za usklađenost.
- Snimajte zaslon ili povremeno snimajte snimke zaslona tijekom probnih vožnji za reviziju.
- Izgradite veliki crveni gumb “Zaustavi”: uputu koju model uvijek poštuje ili prečac na tipkovnici koji zaustavlja kontrolu.
Od proračunske tablice do obrasca: Predložak upita za višekratnu upotrebu
Ovdje je predložak za višekratnu upotrebu koji možete prilagoditi za Gemini 2.5 Computer Use. Kopirajte, prilagodite i spremite ga za sljedeću seriju.
“Zadatak: Predajte obrasce za troškove iz priloženog CSV-a na
Pravila:
- Pripovijedajte radnje. Krećite se polako. Pričekajte do 1,5 s za elemente.
- Mapiranje: name → Ime zaposlenika; week_ending → Završetak tjedna (YYYY-MM-DD upisano izravno); total_miles → Ukupno milja (cijeli broj); rate → Padajući izbornik Stopa; notes → Bilješke; receipt_path → Učitaj.
- Provjera uspjeha: Nakon slanja, zabilježite potvrdni kod (uzorak EXP-####). Provjera neuspjeha: ako se pojavi ‘Pogreška’ ili ‘Pokušajte ponovo’, snimite zaslon, zabilježite broj retka i tekst pogreške, a zatim preskočite.
- Tempo: Obradite 5 redaka odjednom. Nakon svake serije, izvezite CSV zapisnik sa stupcima: redak, status, confirmation_code, screenshot_path, notes.
- Sigurnost: Ako se zatraži MFA ili captcha, pauzirajte i upozorite me. Nemojte nastaviti.
Započnite s jednim zapisom i pričekajte moju potvrdu prije nastavka.”
Ova jedna uputa smanjuje 90 minuta napornog rada na 15 minuta promišljenog nadzora.
Bilješke o rješavanju problema (jer će nešto krenuti po zlu)
- Upiše u pogrešno polje: Recite mu da se poziva na oznaku polja prema blizini teksta: “Upišite u unos desno od oznake ‘Ime zaposlenika’.” Ako oznake nedostaju, pozovite se na tekst rezerviranog mjesta.
- Gumb se neće omogućiti: Obično je potrebno polje prazno ili sadrži razmak. Recite Geminiju da provjeri ima li svako potrebno polje nepraznu vrijednost i da zamuti unos (Tab) kako bi se pokrenula validacija.
- Stranica danas izgleda drugačije: Zatražite od Geminija da ponovno otkrije obrazac skeniranjem naslova i uobičajenih ključnih riječi. Ako je varijacija izgleda uobičajena, održavajte kratki “profil obrasca” za svaku verziju.
- Preuzima prazan račun: Osigurajte da se korak učitavanja dovrši prije slanja; pričekajte oznaku naziva datoteke ili oznaku “učitano”.
- Portal vas odjavljuje: Dodajte korak “održavanja aktivnosti” između zapisa—osvježite stranicu sesije ili se ponovno prijavite kada kolačić istekne.
Usporedba pristupa: Gemini 2.5 vs skripte vs RPA
- Tradicionalne skripte (Selenium, Playwright): Munjevito brze, vrlo precizne, vrlo krhke. Jedna promijenjena CSS klasa i cijeli domino niz se ruši. Izvrsno za kontrolirane aplikacije.
- RPA platforme: Snažne, s vizualnim dijagramima tijeka i upravljanjem poduzećem. Postavljanje može biti projekt. Predivno ako ćete ga koristiti svakodnevno.
- Gemini 2.5 Computer Use: Fleksibilno, razmišljanje očima na stranici. Sporije, ali manje krhko. Idealno za ad hoc pokretanja, neuredne portale trećih strana i jednokratne migracije.
Zamislite Gemini kao svestranog radnika na određeno vrijeme koji može ući u novi ured i shvatiti koja ladica skriva spajalice—uz malo vodstva.
Gdje se Sider.AI uklapa (i zapravo pomaže)
Evo iznenađenja: Sider.AI se vrlo lijepo ponaša kao vaše zapovjedno središte za ove tijekove rada. Možete držati svoje predloške upita, svoje CSV-ove, svoje zapisnike i svoje snimke zaslona na jednom mjestu—i zatražiti od asistenta da spoji korake. Neće zamijeniti praktičnu kontrolu stranice Gemini 2.5 Computer Use, ali može: - Pohranite i verzirajte svoje upite poput kuharice automatizacija
- Sažmite zapisnike pokretanja u jednostavno izvješće “tko je uspio, tko je pao, što dalje”
- Generirajte prilagođene upite za rješavanje problema kada se portal promijeni
- Pomozite vam pretvoriti neurednu proračunsku tablicu u čisti CSV spreman za automatizaciju
Kada se koriste zajedno, Sider.AI je međuspremnik i priručnik; Gemini 2.5 je quarterback na terenu. Napredni potezi: Uvjetna logika, grananje i provjera
Kada vjerujete osnovama, dodajte pamet:
- Grananje: “Ako padajućem izborniku Stopa nedostaje željena opcija, odaberite najbližu utakmicu ≥ tražena stopa; inače, označite redak.”
- Uvjetni prilozi: “Učitajte račun samo ako je total_miles ≥ 50; inače, ostavite prazno.”
- Izvedena polja: “Izračunajte povrat = total_miles × rate; provjerite odgovara li izračunati ukupni iznos portala unutar 0,01 USD; ako ne, snimite zaslon i preskočite.”
- Provjera na više stranica: Nakon slanja, otvorite “Povijest”, pronađite današnji unos i potvrdite podudaraju li se ime i ukupan iznos s CSV-om.
Ove provjere pretvaraju zabavnu demonstraciju u nešto što vaš menadžer odobrava.
Kratka stanka: Sigurnosni teatar vs stvarne zaštite
Naići ćete na portale koji koriste zagonetke, klizače za klikanje i povlačenje ili skočne zagonetke vrijedne Hobita. Neki su stvarna obrana od botova; neki su šminka stranice. Nemojte se boriti s dobrima. Planirajte pauzu za čovjeka u petlji. Neka Gemini objavi: “Otkrivena captcha—spreman za vašu pomoć”, zatim nastavi.
Prava zaštita dolazi od vašeg postavljanja: zasebni profili, ograničene dozvole, zapisnici revizije i jasni uvjeti zaustavljanja.
Mjerenje uspjeha: Kako izgleda “dobro”
Zdrava automatizacija web-obrasca s Gemini 2.5 Computer Use izgleda ovako:
- 95%+ redaka obrađeno bez ručnih podešavanja
- Pogreške su predvidljive i zabilježene (nepodudarni datumi, datoteke koje nedostaju)
- Možete ponovno pokrenuti od zadnjeg neuspjelog retka bez dodirivanja ranijih
- Čovjek može revidirati snimke zaslona i zapisnike kako bi točno razumio što se dogodilo
Kada pogodite te ocjene, pretvorili ste težak posao u uredan, pregledan tijek rada.
Mini priručnik: Od nule do “Pošalji” u 12 koraka
- Identificirajte jedan, dosadan obrazac koji ispunjavate tjedno.
- Očistite svoje podatke. Datumi, brojevi, putanje datoteka.
- Stvorite testni račun i sandbox ako je dostupan.
- Otvorite Gemini 2.5 Computer Use u kontroliranom profilu preglednika.
- Opišite obrazac i navedite mapiranja polja.
- Pokrenite jedan zapis—usporeno, pripovijedano, s vašim očima na njemu.
- Dodajte provjere uspjeha i neuspjeha.
- Izgradite zapisnik serije i snimku zaslona na bilo koju anomaliju.
- Obradite pet zapisa; zatim dvadeset.
- Dodajte male zaštitne ograde (Escape za zatvaranje automatskog dovršavanja; upišite datume izravno).
- Izvezite zapisnik; provjerite na licu mjesta u povijesti portala.
- Spremite svoj upit i strukturu podataka za sljedeći tjedan. Budući ćete vam napisati zahvalnicu.
Još jedna stvar: Nemojte se boriti protiv stranice—naučite stranicu vama
Web voli čuvati tajne. Gumbi se skrivaju iza ikona; polja čekaju da vas izgrde dok ne kliknete. Gemini 2.5 Computer Use magično ne popravlja web—već ga strpljivo uči. Pobjeda nije brzina; to je spokoj. Povratite sat koji ste provodili prebacujući se kroz okvire i umjesto toga ga provedite odlučujući bi li u bilješkama trebalo pisati “Posjete klijentima u zoni B” ili odvažnije “Ekstravaganca zone B.”
Dakle, odaberite jedan obrazac. Stavite Gemini 2.5 Computer Use na vozačko mjesto—s sigurnosnim pojasevima—i dopustite mu da obavi klikanje. Kada se pojavi taj potvrdni kod i nitko nije morao pomicati padajući izbornik, osjećat ćete se kao da se internet ispričao za birač datuma iz 2007.
Ključne točke
- Gemini 2.5 Computer Use može automatizirati web obrasce gledajući i upravljajući vašom stranicom poput pažljivog asistenta.
- Počnite maleno, dodajte zaštitne ograde i širite se tek kada postane dosadno – na dobar način.
- Koristite čiste podatke, eksplicitna mapiranja polja i provjere uspjeha/neuspjeha.
- Prihvatite da su captche i MFA trenuci u kojima je potreban čovjek.
- Uparite s Sider.AI za upravljanje upitima, zapisima i čišćenjem – to je kao spajalica za Gemini.
Sada idi nauči tu formu tko je glavni. Ili, bolje rečeno, tko uljudno delegira.
Često postavljana pitanja
P1: Što je Gemini 2.5 Computer Use, jednostavnim jezikom?
To je način rada u kojem Gemini zapravo može kontrolirati vaš preglednik – klikati, tipkati, učitavati – tako da može automatizirati web obrasce. Zamislite to kao pažljivog pripravnika koji slijedi vaše upute i pripovijeda o potezima.
P2: Može li Gemini 2.5 zaista automatizirati web obrasce s prijenosom datoteka i biračima datuma?
Da, uz jasne upute. Recite mu da izravno upisuje datume, izričito rukuje padajućim izbornikom Rate i zalijepi putanje datoteka u dijaloški okvir za prijenos – te specifičnosti čine razliku.
P3: Kako održati automatizaciju web obrazaca sigurnom i usklađenom?
Koristite zaseban profil preglednika, račune s najmanjim privilegijama i zapise za svako pokretanje. Izbjegavajte stavljanje lozinki u upite; zaustavite se za captche i MFA, a zatim nastavite.
P4: Je li Gemini 2.5 brži od tradicionalnih skripti poput Seleniuma?
Obično nije, ali je prilagodljiviji neurednim stranicama i jednokratnim poslovima. Skripte su brže i krhke; Gemini je sporiji, ali je manje vjerojatno da će se pokvariti kada se promijeni CSS web-mjesta.
P5: Gdje Sider.AI pomaže u ovom tijeku rada?
Sider.AI može pohraniti vaše upite, očistiti vaše CSV-ove, sažeti zapise i generirati savjete za rješavanje problema. To je organizator i glavni urednik vašeg priručnika za automatizaciju dok Gemini obavlja klikanje. 
