Ooit gewenst dat je browser gewoon... het formulier voor je zou invullen?
Stel je voor: het is 23:58 uur. Je hebt beloofd om hetzelfde onkostenformulier in te dienen dat je bedrijf al gebruikt sinds Netscape cool was. Je tuurt naar 17 vakken—naam, adres, datum, datum nog een keer (in twee formaten!), een dropdown die alleen werkt als je precies op het driehoekje klikt. Je mompelt. Je koffie zucht. Je vraagt je af of het internet volwassen is geworden en vergeten is je mee te nemen.
Betreed Gemini 2.5 Computer Use—het Google-model dat, in de juiste setup, je computer kan bedienen als een geduldige assistent die het niet erg vindt om namens jou te klikken, typen, scrollen en uploaden. Niet alleen vragen beantwoorden. Niet alleen toetsaanslagen suggereren. We hebben het over: het beweegt daadwerkelijk de cursor, opent de site, logt in en vult het webformulier in.
Voelt het alsof je je autosleutels overhandigt aan een vriend die net heeft leren schakelen? Ja. Is het vreemd spannend als het werkt? Ook ja. En dat is de rit van vandaag: hoe je webformulieren kunt automatiseren met Gemini 2.5 Computer Use in actie—veilig, verstandig en met een paar lachbuien wanneer het denkt dat de knop “Verzenden” eigenlijk een decoratief logo is.
In deze praktische handleiding leid ik je door:
- Wat “Computer Use” eigenlijk betekent voor Gemini 2.5
- Hoe je een formulierinvulworkflow opzet die herhaalbaar en niet angstaanjagend is
- Een stapsgewijze demo: van CSV naar ingevulde formulieren
- Trucs voor lastige velden (captcha's, datumkiezers, meerstaps wizards)
- Veiligheid, privacy en de zeer reële grenzen van de huidige webautomatisering
- Hoe tools zoals Sider.AI je commandocentrum kunnen zijn voor het temmen van dit circus
Allemaal in begrijpelijke taal. Met omwegen voor de real-world valkuilen die je onderweg tegenkomt.
Wat is Gemini 2.5 Computer Use? Beschouw het als een zorgvuldige robot-stagiair
“Computer Use” is een modus waarin Gemini 2.5 niet alleen tekst genereert—het bestuurt een browser en je desktop, onder jouw toezicht. Het kan:
- Een website openen, door menu's navigeren en rondklikken
- Typen in invoervelden en tekstvakken (zelfs degene die verschijnen na drie modals)
- Bestanden uploaden/downloaden
- Screenshots maken en redeneren over wat het ziet (dat is de magie)
In praktische termen kan Gemini 2.5 Computer Use webformulieren end-to-end automatiseren. Je beschrijft de taak (“Ga naar deze URL, log in, dien het wekelijkse kilometerformulier in voor deze lijst met werknemers”), geeft het de gegevens en het doet het klikken en typen. De aantrekkingskracht? Geen swivel-chair automatisering meer—kopiëren van spreadsheets en plakken in velden tot je ziel je lichaam verlaat.
Maar—en dit is een celebrity-size maar—het web is een dierentuin. Formulieren variëren enorm. Sommige vereisen maanden met één cijfer; andere willen de volledige maandnaam in het Noors. Daarom heb je een paar best practices en een kaart nodig voor wanneer de robot-stagiair in de war raakt.
De juiste taken voor Gemini 2.5: Wanneer automatisering schittert (en wanneer niet)
Gebruik Gemini 2.5 Computer Use voor:
- Repetitieve interne formulieren (onkostenrapporten, HR-updates, onboarding, reiskostenvergoedingen)
- Vendorportals met consistente lay-outs en voorspelbare velden
- Data-entry migraties (CSV naar webformulier, database naar SaaS-app)
- Multi-record updates waarbij het pad hetzelfde is; alleen de waarden veranderen
Vermijd (of bereid je voor op meer begeleiding) wanneer:
- Er is een captcha of agressieve bot-verdediging (de uitsmijter met een zaklamp)
- Tweefactorauthenticatie is vereist voor elke actie
- De paginalay-out radicaal verandert per record
- Toegankelijkheid is slecht (velden zonder label, klikbare dingen die geen knoppen zijn)
Vuistregel: als een zorgvuldig mens het in een ritme kan doen, kan Gemini 2.5 het meestal leren. Als een zorgvuldig mens elke stap moet raden, kan het model quality time besteden aan het klikken op decoratieve franjes.
Je starterkit: Tools en voorbereiding
Je hebt nodig:
- Een browser die Gemini kan besturen (meestal Chrome/Chromium via een veilige automatiseringslaag)
- Indien mogelijk, alleen-lezen inloggegevens voor de doel-site (least-privilege mindset)
- Een schoon testaccount of sandbox-omgeving (zodat je niet per ongeluk 12.000 widgets bestelt)
- Je gegevens in een nette indeling (CSV, JSON of een Google Sheet), met headers die overeenkomen met formulierlabels
- Een checklist van de formuliervelden in de volgorde waarin ze verschijnen
Optioneel maar zeer nuttig:
- Screenshots van het formulier met labels omcirkeld als een coach die een spel uittekent
- Een kleine set van 3–5 voorbeeldrijen voor testruns
- Een logbestand waarin je de status van elke run en eventuele fouten vastlegt
Walkthrough: Gemini 2.5 Computer Use vult een voorbeeld-onkostenformulier in
We doen dit als een kookprogramma. Aan het einde heb je 40 formulieren ingediend en geen soufflés zijn ingestort.
Scenario: Je team dient wekelijkse kilometervergoedingen in. Het webformulier heeft:
- Naam werknemer (tekstveld)
- Week eindigend (datumkiezer)
- Totaal aantal kilometers (numeriek)
- Tarief (dropdown: 0.50, 0.58, 0.62)
- Upload: Ontvangstbewijs (PDF)
- Verzenden, dan een bevestigingscode
Je data staat in een CSV:
name,week_ending,total_miles,rate,notes,receipt_path
Alex Park,2025-10-03,142,0.58,Client visits in Zone B,/receipts/alex-1003.pdf
Riya Shah,2025-10-03,87,0.58,Airport shuttle runs,/receipts/riya-1003.pdf
...etc
Stap 1: Prime Gemini 2.5 met context
- Geef de site-URL, eventuele inlogstappen en de exacte labels zoals geschreven op de pagina.
- Voeg de CSV-headers en een beschrijving toe van hoe je ze aan velden kunt toewijzen.
- Zeg wat er moet gebeuren als velden ontbreken of geblokkeerd zijn (bijv. rij overslaan, fout loggen).
Voorbeeld instructie-snippet:
“Open Log in met het testaccount. Voor elke CSV-rij, voer in: Name → Employee Name, week_ending → Week Ending (YYYY-MM-DD), total_miles → Total Miles, rate → Rate dropdown, notes → Notes, receipt_path → Upload. Submit. Kopieer na het indienen de bevestigingscode en noteer deze naast de rij.”
Stap 2: Een droge run met één rij
- Vraag Gemini om één record langzaam uit te voeren, waarbij elke actie wordt verteld. Kijk er als een havik naar.
- Bevestig dat het de juiste dropdown selecteert en de notities niet in het veld “Total Miles” typt (het gebeurt!).
- Als de datumkiezer een kalenderwidget opent, instrueer: “Typ de datum rechtstreeks in het veld in YYYY-MM-DD; klik niet op de kalender.”
Stap 3: Voeg vangrails toe
- Vertel het hoe succes te detecteren: zoek bijvoorbeeld naar het woord “Confirmation” en een codepatroon zoals EXP-####.
- Vertel het hoe falen te detecteren: als “Error” of “Try again” verschijnt, maak een screenshot en ga naar de volgende rij.
- Beperk tempo: “Wacht 500–800 ms na elke pagina load. Als de knop is uitgeschakeld, controleer dan opnieuw op verplichte velden.”
Stap 4: Batch-modus
- Nu zeg je: “Verwerk de volgende vijf rijen.” Observeer. Als het zich gedraagt, verhoog dan naar 20.
- Houd een logboek bij: rijnummer, status, bevestigingscode, screenshot-pad.
Stap 5: Afronding
- Exporteer het logboek als CSV. Laat Gemini het terugplakken of opslaan in je map. Controleer een paar inzendingen steekproefsgewijs op de portal.
Wat je hebt gedaan, is Gemini 2.5 Computer Use een ritueel leren. In tegenstelling tot breekbare scripts, ziet het de pagina, past het zich aan kleine UI-verschuivingen aan en gaat het door. Het is alsof je met een zorgvuldige assistent werkt; je laat het zien, vertrouwt het dan—maar je controleert nog steeds het werk.
De lastige stukjes: Datumkiezers, bestandsuploads, meerstaps wizards
Hoe je de gebruikelijke boosdoeners in webformulieren aanpakt:
- Datumkiezers: Instrueer Gemini om de datum in het invoervak te typen met behulp van het geaccepteerde formaat van de site. Als de site typen verbiedt, zeg dan: “Open de kalender, navigeer naar de juiste maand met behulp van de linker/rechter pijlen en klik vervolgens op de datum.” Voeg voorbeelden toe: “Selecteer voor 2025-10-03 3 oktober 2025.”
- Numerieke validatie: Sommige velden verwerpen komma's of meer dan twee decimalen. Verduidelijk: “Voer Total Miles in als een geheel getal zonder komma's.” Als je rode fouttekst ziet, vertel Gemini dan hoe het te wissen.
- Dropdowns: Vele zijn aangepaste widgets met verborgen lijsten. Zeg: “Klik op de Rate dropdown; als opties niet openen, klik dan op het chevron-icoon. Kies de tekst '0.58'. Indien niet zichtbaar, scroll binnen de dropdown lijst.”
- Bestandsuploads: Wijs Gemini naar het exacte bestandspad. Als het OS-dialoogvenster verschijnt, vertel het dan om het pad in het bestandsnaamveld te typen en op Enter te drukken. Als meerdere bestanden zijn toegestaan, specificeer dan of het na één bestand moet stoppen.
- Meerstapsformulieren: Vertel Gemini om te wachten tot de knop “Next” is ingeschakeld. Als de pagina verandert, bevestig dan door te zoeken naar een kop als “Step 2: Details.”
- Captcha's en MFA: Je teken om af te haken. Vraag om een pauze zodat een mens de captcha kan doen of de pushmelding kan goedkeuren. Laat Gemini dan hervatten.
- Autocomplete pop-ups: Als een browser suggesties bubble overlapt het veld, instrueer Gemini om op Escape te drukken voor het typen.
Een reality check op snelheid en nauwkeurigheid
Gemini 2.5 Computer Use is geen raceauto—het is meer een zeer geduldige fietser die elk stopbord gehoorzaamt. Het zal een head-down menselijke snelheidsduivel niet verslaan, maar het bespaart je aandacht. Belangrijker nog, het wordt niet slordig bij het tiende identieke formulier.
Nauwkeurigheidstips:
- Begin met vijf records. Los problemen op. Schaal dan.
- Voeg “sanity checks” toe na elke inzending: bevestig totalen, verifieer dat de nieuwe rij verschijnt in de geschiedenispagina van de portal.
- Houd de gegevens schoon bij de bron: uniformeer datumnotaties; pre-valideer nummers.
- Log alles. Als je het niet kunt auditen, kun je het niet vertrouwen.
Veiligheid eerst: Toestemmingen, privacy en grenzen
De controle over je browser aan een AI geven is alsof je je kind je creditcard geeft in een supermarkt. Stel regels in.
- Gebruik een apart browserprofiel met beperkte cookies en toestemmingen.
- Maak een “least privilege” testgebruiker—geen admin-toegang, beperkte scope.
- Sla nooit echte wachtwoorden op in platte tekst binnen prompts. Gebruik een veilige secret manager indien beschikbaar.
- Als de flow persoonlijke gegevens aanraakt (BSN's, gezondheidsdetails), stem dit dan eerst af met je compliance team.
- Neem scherm op of maak periodieke screenshots tijdens testruns voor auditing.
- Bouw een grote rode “Stop” knop: een instructie die het model altijd gehoorzaamt, of een sneltoets die de controle stopt.
Van spreadsheet naar formulier: Een herbruikbare prompt-template
Hier is een herbruikbare template die je kunt aanpassen voor Gemini 2.5 Computer Use. Kopieer, tweak en bewaar het voor je volgende batch.
“Taak: Dien onkostenformulieren in van de bijgevoegde CSV op
Regels:
- Vertel acties. Beweeg langzaam. Wacht tot 1,5s op elementen.
- Mapping: name → Employee Name; week_ending → Week Ending (YYYY-MM-DD direct getypt); total_miles → Total Miles (geheel getal); rate → Rate dropdown; notes → Notes; receipt_path → Upload.
- Succes check: Na submit, capture confirmation code (pattern EXP-####). Failure check: if ‘Error’ or ‘Try again’ appears, take a screenshot, log the row number and error text, then skip.
- Pace: Process 5 rows at a time. After each batch, output a CSV log with columns: row, status, confirmation_code, screenshot_path, notes.
- Safety: If asked for MFA or captcha, pause and alert me. Do not proceed.
Begin with a single record and wait for my confirmation before continuing.”
Deze ene prompt reduceert 90 minuten zwoegen tot 15 minuten doordacht toezicht.
Probleemoplossende kanttekeningen (omdat er iets fout zal gaan)
- Het typt in het verkeerde veld: Vertel het om te verwijzen naar het veldlabel op tekstnabijheid: “Typ in de input rechts van het label 'Employee Name'.” Als labels ontbreken, verwijs dan op placeholder tekst.
- De knop wordt niet ingeschakeld: Meestal is een verplicht veld leeg of whitespace. Vertel Gemini om te verifiëren dat elk verplicht veld een niet-lege waarde heeft en om de input te bluren (Tab) om validatie te activeren.
- De pagina ziet er vandaag anders uit: Vraag Gemini om het formulier opnieuw te detecteren door te scannen op kopteksten en veelvoorkomende trefwoorden. Als lay-outvariantie gebruikelijk is, houd dan een kort “formulierprofiel” bij voor elke versie.
- Downloadt een blanco ontvangstbewijs: Zorg ervoor dat de uploadstap is voltooid voor de inzending; wacht op de bestandsnaamchip of “geüpload” tag.
- De portal logt je uit: Voeg een “keepalive” stap toe tussen records—ververs de sessiepagina of log opnieuw in wanneer een cookie verloopt.
Vergelijken van benaderingen: Gemini 2.5 vs scripts vs RPA
- Traditionele scripts (Selenium, Playwright): Razendsnel, zeer precies, zeer breekbaar. Eén veranderde CSS-klasse en de hele dominosteen valt om. Geweldig voor gecontroleerde apps.
- RPA-platforms: Krachtig, met visuele stroomdiagrammen en enterprise governance. Setup kan een project zijn. Geweldig als je het dagelijks zult gebruiken.
- Gemini 2.5 Computer Use: Flexibel, redeneren met de ogen op de pagina. Langzamer, maar minder breekbaar. Ideaal voor ad hoc runs, rommelige third-party portals en eenmalige migraties.
Beschouw Gemini als de veelzijdige gig worker die een nieuw kantoor kan binnenlopen en kan uitzoeken welke lade de paperclips verbergt—met een beetje begeleiding.
Waar Sider.AI in past (en daadwerkelijk helpt)
Hier is een verrassing: Sider.AI speelt heel goed als je commandocentrum voor deze workflows. Je kunt je prompt templates, je CSV's, je logs en je screenshots op één plek bewaren—en de assistent vragen om de stappen aan elkaar te naaien. Het zal Gemini 2.5 Computer Use's hands-on paginabediening niet vervangen, maar het kan: - Sla je prompts op en versioneer ze als een kookboek van automatiseringen
- Vat run logs samen in een eenvoudig “wie is geslaagd, wie is mislukt, wat nu” rapport
- Genereer op maat gemaakte prompts voor probleemoplossing wanneer een portal verandert
- Help je een rommelige spreadsheet om te zetten in een schone, automatisering-ready CSV
Samen gebruikt, is Sider.AI het klembord en het draaiboek; Gemini 2.5 is de on-field quarterback. Geavanceerde moves: Conditionele logica, branching en verificatie
Zodra je de basis vertrouwt, voeg dan slimme dingen toe:
- Branching: “Als de Rate dropdown de gewenste optie mist, kies dan de dichtstbijzijnde match ≥ gevraagd tarief; vlag anders de rij.”
- Conditionele attachments: “Upload alleen een ontvangstbewijs als total_miles ≥ 50; laat anders leeg.”
- Afgeleide velden: “Bereken vergoeding = total_miles × rate; verifieer dat het berekende totaal van de portal overeenkomt binnen $0.01; zo niet, screenshot en skip.”
- Cross-page verificatie: Open na inzending “History,” vind de vermelding van vandaag en valideer dat de naam en het totaal overeenkomen met de CSV.
Deze checks transformeren een leuke demo in iets dat je manager goedkeurt.
Een snelle omweg: Veiligheidstheater vs echte bescherming
Je zult portals tegenkomen die puzzels, click-and-drag sliders of pop-up raadsels gebruiken die een Hobbit waardig zijn. Sommige zijn echte bot-verdedigingen; sommige zijn paginamake-up. Vecht niet tegen de goede. Plan voor een human-in-the-loop pauze. Laat Gemini aankondigen: “Captcha gedetecteerd—klaar voor je hulp,” hervat dan.
De echte bescherming komt van je setup: aparte profielen, beperkte toestemmingen, audit logs en duidelijke stopcondities.
Succes meten: Hoe “goed” eruitziet
Een gezonde webformulierautomatisering met Gemini 2.5 Computer Use ziet er als volgt uit:
- 95%+ van de rijen verwerkt zonder handmatige aanpassingen
- Fouten zijn voorspelbaar en gelogd (verkeerde datums, ontbrekende bestanden)
- Je kunt opnieuw starten vanaf de laatste mislukte rij zonder de eerdere aan te raken
- Een mens kan screenshots en logs auditen om precies te begrijpen wat er is gebeurd
Wanneer je die marks raakt, heb je zwoegen omgezet in een nette, reviewable workflow.
Het mini-draaiboek: Van nul naar “Verzenden” in 12 stappen
- Identificeer een enkel, saai formulier dat je wekelijks invult.
- Maak je data schoon. Datums, nummers, bestandspaden.
- Maak een testaccount en een sandbox aan indien beschikbaar.
- Open Gemini 2.5 Computer Use in een gecontroleerd browserprofiel.
- Beschrijf het formulier en geef veldtoewijzingen.
- Run één record—slow motion, verteld, met je ogen erop.
- Voeg succes- en faalchecks toe.
- Bouw een batchlogboek en screenshot bij elke anomalie.
- Verwerk vijf records; dan twintig.
- Voeg kleine vangrails toe (Escape om autocompletes te sluiten; typ datums direct).
- Exporteer het logboek; controleer steekproefsgewijs in de geschiedenis van de portal.
- Bewaar je prompt en datastructuur voor volgende week. Toekomstige jij zal je een bedankbriefje schrijven.
Nog één ding: Vecht niet tegen de pagina—leer de pagina jou
Het web houdt ervan geheimen te bewaren. Knoppen verbergen zich achter iconen; velden wachten om je te berispen totdat je wegklikt. Gemini 2.5 Computer Use lost het web niet op magische wijze op—het leert het geduldig. De winst is niet snelheid; het is sereniteit. Je claimt een uur terug dat je vroeger besteedde aan het tabben door vakken en besteedt het in plaats daarvan aan het beslissen of de notities moeten zeggen “Client visits in Zone B” of het meer gewaagde “Zone B extravaganza.”
Dus kies één formulier. Zet Gemini 2.5 Computer Use op de bestuurdersstoel—met veiligheidsgordels—en laat het klikken. Wanneer die bevestigingscode verschijnt en niemand een dropdown hoefde te wiebelen, zul je het gevoel hebben dat het internet zich verontschuldigde voor de datumkiezer van 2007.
Belangrijkste takeaways
- Gemini 2.5 Computer Use kan webformulieren automatiseren door je pagina te zien en te bedienen als een zorgvuldige assistent.
- Begin klein, voeg vangrails toe en schaal pas op wanneer het saai wordt—in de goede zin van het woord.
- Gebruik schone data, expliciete veldtoewijzingen en succes-/mislukkingcontroles.
- Accepteer dat captchas en MFA momenten zijn waarbij menselijke interactie nodig is.
- Combineer met Sider.AI om prompts, logs en opschoning te beheren—het klembord voor de handen van Gemini.
Ga nu dat formulier eens leren wie de baas is. Of liever gezegd, wie beleefd delegeert.
FAQ
V1: Wat is Gemini 2.5 Computer Use, in gewoon Nederlands?
Het is een modus waarin Gemini daadwerkelijk je browser kan besturen—klikken, typen, uploaden—zodat het webformulieren kan automatiseren. Zie het als een zorgvuldige stagiair die je instructies opvolgt en de acties beschrijft.
V2: Kan Gemini 2.5 echt webformulieren automatiseren met het uploaden van bestanden en datumkiezers?
Ja, met duidelijke instructies. Zeg hem dat hij datums direct moet typen, de 'Rate' dropdown expliciet moet behandelen en bestandspaden in het uploadvenster moet plakken—die details maken het verschil.
V3: Hoe houd ik de automatisering van webformulieren veilig en compliant?
Gebruik een apart browserprofiel, accounts met minimale rechten en logs voor elke run. Vermijd het plaatsen van wachtwoorden in prompts; pauzeer voor captchas en MFA en hervat daarna.
V4: Is Gemini 2.5 sneller dan traditionele scripts zoals Selenium?
Meestal niet, maar het is beter aanpasbaar aan rommelige pagina's en eenmalige klussen. Scripts zijn sneller maar fragiel; Gemini is langzamer, maar het is minder waarschijnlijk dat het breekt als de CSS van de site verandert.
V5: Waar helpt Sider.AI in deze workflow?
Sider.AI kan je prompts opslaan, je CSV's opschonen, logs samenvatten en tips voor probleemoplossing genereren. Het is de organisator en hoofdredacteur voor je automatiseringsdraaiboek, terwijl Gemini het klikken doet.